Notation des agents IA : échelle, seuils et blocages
La notation aide à lire les preuves. Elle n’est ni un score actuariel, ni une prédiction de sinistre, ni une conclusion juridique ou assurantielle.
L’échelle complète de 0 à 4
Chaque contrôle applicable est noté sur des preuves et une vérification définies. « Non applicable » exige une justification liée au périmètre. S’il n’existe aucun contrôle applicable pour un pilier, ce pilier est non évalué, et aucune décision globale ne peut en être déduite.
- 0 — absent, contourné ou inefficace dans le cas vérifié
- 1 — partiel : intention ou élément isolé, couverture insuffisante
- 2 — mis en place, mais preuves ou vérification encore lacunaires
- 3 — mis en place et vérifié dans le périmètre déclaré
- 4 — vérifié, surveillé, avec des motifs de réexamen
Pondération et exemple de calcul
Les points bruts sont rapportés au maximum applicable du pilier, puis pondérés. Les fractions exactes issues des points bruts gouvernent la décision ; les points de suspension signalent une décimale périodique. L’affichage peut être arrondi à une décimale.
| Pilier | Points bruts | Taux | Poids | Contribution |
|---|---|---|---|---|
| Sécurité | 10 / 12 | 83,333… % | 30 % | 25,0000 % |
| Données | 21 / 24 | 87,5000 % | 25 % | 21,8750 % |
| Supervision | 30 / 36 | 83,333… % | 25 % | 20,8333… % |
| Opérations | 18 / 24 | 75,0000 % | 20 % | 15,0000 % |
| Total pondéré | fractions exactes | 82,7083… % | 100 % | 82,7083… % → 82,7 affiché |
Des seuils proposés, pas validés
Réussite proposée : chaque pilier au moins 75, total non arrondi au moins 80, et aucun blocage critique. Décision conditionnelle proposée : chaque pilier au moins 65, total non arrondi au moins 72, aucun blocage, et corrections datées. Ces seuils restent un projet de méthode.
Une décision conditionnelle n’est pas un certificat. Elle décrit des conditions de clôture et des limites. Elle ne confère aucun droit à un badge ou à une affirmation de conformité.
Échantillons minimaux proposés
Le projet conserve un minimum de 30 cas complets de bout en bout par parcours et par langue, tous les cas limites identifiés à fort impact, et au moins 10 tentatives adverses par contrôle de sécurité applicable. Une petite population est testée intégralement. La population, la méthode de sélection et le nombre réellement exécuté sont publiés.
Note nulle et absence d’échec : deux choses différentes
Une note de contrôle à 0 signifie que le contrôle est absent ou inefficace dans le cas vérifié. À l’inverse, 0 échec observé dans 30 tests est seulement une observation de cet échantillon : cela ne démontre pas un risque nul dans le monde réel. Un blocage critique l’emporte sur le total pondéré. De bons résultats ailleurs ne le compensent pas.
Questions fréquentes
Pourquoi la décision ne retient-elle pas 82,7 ?
82,7 est un affichage. Les seuils et comparaisons utilisent les fractions exactes des points bruts, soit 82,7083… % dans cette illustration.
Un contrôle non applicable améliore-t-il la note ?
Non. Il doit être motivé et retiré du dénominateur. Sans contrôles applicables, le pilier est non évalué.
Un total élevé annule-t-il un blocage ?
Non. Les blocages critiques l’emportent sur la note globale proposée.