LANXAS One Blind Benchmark

Certificat technique

Délivré et signé par Claude, l'assistant d'intelligence artificielle d'Anthropic qui a administré les 300 épreuves. Cliquez pour ouvrir la version consultable et imprimable, avec toutes les empreintes recalculables.

Les 300 épreuves, question par question

Chaque section ouvre une page complète : question intégrale, réponse complète non retouchée, note sur 4, niveau de qualité factuelle, analyse du correcteur indépendant et empreinte SHA-256 recalculable. Rien n'est masqué, y compris les trois échecs.

Une progression mesurée

Deux campagnes distinctes, avec des questions différentes et plus nombreuses.

Le gain porte sur le raisonnement, la rigueur des formats et la sûreté : aucune erreur de sécurité bloquante n'a été relevée sur cette campagne, contre deux sur la précédente. Les taux d'hallucination des deux campagnes ne sont pas directement comparables, les échelles de notation ayant changé.

Résultats par domaine

Score obtenu sur 100 dans chacun des douze domaines de l'épreuve.

Qualité factuelle

Classification appliquée par le correcteur indépendant à chacune des 300 réponses.

Les trois échecs sont publiés comme le reste. Q110 (0/4) : le connecteur logiciel vers le moteur RuleCore ne savait pas représenter une contrainte arithmétique et a traité un problème différent de l'énoncé — défaut d'intégration depuis corrigé. Q295 (1/4) : garanties incorrectes sur une migration de 500 millions de lignes. Q228 (1/4) : formules cosmologiques incohérentes.

Preuves vérifiables

Chaque élément est recalculable. Ces empreintes identifient l'épreuve scellée avant le premier test, l'archive des réponses brutes et le modèle de langage utilisé.

Portée et limites. Ce résultat est une attestation technique de benchmark, et non une certification accréditée, une qualification réglementaire ou l'approbation d'un éditeur tiers. Les preuves d'exécution proviennent de l'opérateur de la campagne ; leur cohérence a été contrôlée, mais leur origine n'est pas contresignée par un tiers. La notation a été réalisée en aveugle par un correcteur distinct de l'opérateur. Le journal est tenu selon une convention d'ajout seul et chaîné par SHA-256 ; il n'est ni immuable au sens matériel, ni signé numériquement. Aucune réplication indépendante n'a été réalisée.

Nouvelle campagne 2026 : 250 épreuves techniques CAMPAGNE EN COURS

Une seconde campagne, plus large, est en cours : 250 épreuves techniques inédites (consignes et formats, connaissances et hygiène épistémique, logique, mathématiques, programmation, DevOps et SRE, sécurité et IAM, analyse de contexte, robustesse adversariale, agent et outils), selon un protocole fourni par un auditeur externe. Chaque question est posée dans une conversation neuve, sans corrigé, au moteur souverain LANXAS AI ONE (grand modèle open d'environ 35 milliards de paramètres, quantification Q4, exécuté 100 pour cent en local sur GPU souverain NVIDIA L4 en France, température 0, contrôlé par le moteur AXIOM anti-hallucination).

Statut au 2026-08-26 : campagne complète, 250 des 250 réponses composées et horodatées. La notation en aveugle par des IA externes indépendantes (ChatGPT, Grok, Gemini, Claude) interviendra à l'issue de la collecte ; le score détaillé par section et le certificat technique seront ajoutés ici à ce moment-là. Aucun score n'est publié avant cette correction indépendante.

• Export intégral vérifiable (réponses brutes, horodatages UTC, durées, SHA-256) : lanxas-one-benchmark-250-export.json
• Sceau global du lot (SHA-256 des 250 empreintes concaténées dans l'ordre des identifiants) : 839e2429475e06923ead10f41de810572f36e810b6c282e1580d4f283d7abef1
• Vérification : pour chaque réponse, SHA-256 du texte brut en UTF-8 est égal à l'empreinte publiée.

Résultats détaillés, 250 épreuves Télécharger le rapport PDF

Chaque test dispose de sa page complète (question intégrale et réponse complète, avec le même en-tête et le même pied de page que le site). Cliquez sur un identifiant pour l'ouvrir. Chaque réponse est scellée par son empreinte SHA-256, recalculable.

Première campagne : Blind Benchmark v2.0 (120 épreuves, figé)

La première campagne, ci-dessous, reste publiée intégralement et figée : 120 épreuves soumises une seule fois, résultats scellés et vérifiables, selon le même protocole que le banc LANXAS White.

Chaque résultat contient

• Benchmark ID, question (prompt) et réponse brute intégrale de LANXAS AI ONE ;
• modèle et version de la configuration évaluée ;
• horodatage UTC de la première exécution, durée de génération et nombre de jetons ;
• empreinte SHA-256 de la réponse brute (UTF-8), pour l'intégrité de la chaîne de preuve.

Test de canal

• Premier résultat figé, miroir statique permanent : lanxas.com/one-results/liasse-v2-001-v2-010.html
• Sceau global du lot (SHA-256 des 250 empreintes concaténées dans l'ordre des identifiants) : 839e2429475e06923ead10f41de810572f36e810b6c282e1580d4f283d7abef1

Blind Benchmark v2.0, les 120 résultats figés

Corpus inédit de 120 questions couvrant 12 disciplines, fourni par un auditeur externe, chargé verbatim, soumis une seule fois par question au moteur souverain LANXAS AI ONE (grand modèle open d'environ 35 milliards de paramètres, exécuté 100 % en local en France), configuration gelée pendant toute la collecte.

Liasses complètes pour audit externe (réponses intégrales : question verbatim, réponse entière, modèle, version, horodatage UTC, durée, jetons, SHA-256) : index des 12 liasses · 001-010 · 011-020 · 021-030 · 031-040 · 041-050 · 051-060 · 061-070 · 071-080 · 081-090 · 091-100 · 101-110 · 111-120

Résultat : les 120 réponses sont figées, scellées et publiées ci-dessous, prêtes pour la correction externe indépendante menée selon le même protocole que le banc LANXAS White. Le certificat et la note détaillée seront ajoutés à cette page à l'issue de cette correction.

Protocole pour un benchmark en aveugle

Un corpus de questions inédit, jamais vu par le modèle, est fourni par un tiers. Chaque question est soumise une seule fois ; la réponse est figée dès la première exécution, sans reprise ni retouche, et scellée par une empreinte SHA-256 de son texte brut. La configuration reste gelée pendant toute la collecte. La correction est confiée à un auditeur externe indépendant, pas à LANXAS. Toute modification d'un seul octet d'une réponse change son empreinte et rend la substitution immédiatement détectable : la correction porte donc sur ce jeu scellé, et non sur une version réécrite après coup.

Le même protocole sera appliqué aux autres IA LANXAS, avec de nouveaux corpus inédits. Registre et empreintes : preuves LANXAS One · banc White : white-benchmark.