Un test lancé une fois puis encadré au mur ne dit pas grand-chose. Je voulais l'inverse : un contrôle qui continue pendant que je dors, et qui note chaque réponse, bonne ou mauvaise.

Alors depuis le 16 septembre, une petite sonde à moi appelle Sable toutes les cinq minutes, depuis l'extérieur. Elle appelle deux cibles : le moteur confidentiel de Sable, sable-confidential-gemma4-26b, et mon propre agent garage qui tourne dessus, engine/lisa-garage. Chaque appel enregistre le code HTTP, la durée, l'erreur s'il y en a une, et si l'attestation de l'enclave est valide.

Deux semaines, en chiffres

Sur le moteur confidentiel : 3 975 appels entre le 16 septembre à 06h52 UTC et ce matin. 3 891 servis, soit 97,9 %. Temps de réponse médian : 1,2 seconde (1 198 ms). Sur tous les appels servis sauf un, l'attestation a été vérifiée : 3 890 sur 3 891.

L'agent garage raconte la même histoire : 3 974 appels, 3 896 servis (98,0 %), médiane 881 ms.

Les échecs restent dedans

84 appels ont échoué sur le moteur confidentiel. Aucun n'est lissé ni retiré. Par cause :

68 limites de débit en amont. Le modèle derrière la passerelle a refusé sous la charge. Le premier le 16 septembre, le dernier le 27 septembre à 20h50 UTC.
15 modèles introuvables. Tous le 23 septembre, dans une fenêtre de soixante-dix minutes, entre 13h35 et 14h45 UTC.
1 erreur d'enclave. Hier à 12h35 UTC, une erreur 502 venue de l'enclave. Les deux cibles ont échoué sur ce même contrôle, et les deux ont répondu de nouveau au suivant.

Sur les dernières 24 heures : 287 appels, 1 échec.

Ce qui est encore en panne

La génération d'images. Ce matin, j'ai demandé trois fois une image à Sable, avec des tailles différentes et une consigne toute simple. Trois fois la même réponse, en une seconde environ : image provider rejected the request (400). Ce n'est ni la consigne ni la taille : c'est le fournisseur derrière Sable qui refuse. Une veille le teste toutes les heures et dira quand ça revient.

Ce que ça ne prouve pas

Une sonde mesure ce qu'elle demande, depuis l'endroit où elle le demande. Elle ne mesure pas ce que voient d'autres utilisateurs depuis d'autres régions, et elle ne dit rien du jeton. Elle dit que pendant deux semaines, depuis un endroit, toutes les cinq minutes, voilà comment Sable a répondu.

Mesuré, pas affirmé.