← Retour aux évaluations

OpenAI GPT-5.5

Exécution LUCA preprod GPT-5.5 sur 100 questions avec 1 génération par question.
100 questions × 1 génération

En un coup d’œil

OpenAI GPT-5.5 obtient un score moyen de 59.1/100.

Il produit une erreur technique grave sur 20 question(s) sur 100.

83 question(s) sur 100 ont obtenu au moins un peu de points, 17 sont des échecs complets (score nul).

Ses meilleures performances sont sur le thème conformité (83.0/100), ses plus faibles sur droit des sociétés (51.0/100).

Indicateurs clés

Score moyen
59.1/100
Moyenne sur 100 question(s). Chaque question est notée de 0 à 10, ramenée ici sur 100.
Réponses non nulles
83.0%
83 question(s) sur 100 ont obtenu au moins un peu de points.
Erreurs majeures
20.0%
20 question(s) sur 100 contiennent une erreur technique grave.
Questions
100
Nombre de questions posées au modèle.
Temps moyen par réponse
73.9 s
Le modèle met ~73.9 s en moyenne pour produire une réponse.
Longueur moyenne de réponse
1046 mots
~1046 mots en moyenne par réponse sur 100 question(s).

Avec Luca vs Sans Luca

Avec Luca, le modèle gagne 2.4 points sur le score moyen.

Avec Luca, le taux d’erreurs majeures est plus élevé de 1.3 points.

Score moyen
Avec Luca59.1/100
Sans Luca56.8/100
+2.4 pts grâce à Luca
Erreurs majeures
Avec Luca20.0%
Sans Luca18.7%
−1.3 pts grâce à Luca
Réponses non nulles
Avec Luca83.0%
Sans Luca90.0%
−7.0 pts grâce à Luca

Classement par thème

Meilleur thème conformité (83.0/100) · Plus faible droit des sociétés (51.0/100)

Score moyen par thème

Avec LucaSans Lucaconformitéconformité83.0%80.2%social/payesocial/paye73.1%56.7%comptabilitécomptabilité65.9%67.3%fiscalitéfiscalité52.5%55.0%droit des sociétésdroit des sociétés51.0%50.5%

Échecs complets vs réponses utiles

Sur 100 question(s), 17 ont reçu un score nul (échec complet), " 83 ont obtenu au moins un peu de points.

17.0 nul
83.0 non nul
Détails de la distribution des scores

Répartition des notes attribuées par le juge (de 0 à 10). Permet de voir si le modèle obtient beaucoup de notes moyennes, ou si tout se joue aux extrêmes (succès complets vs échecs francs).

Distribution des scores (sur 10)

0.0-1.0171.0-2.022.0-3.023.0-4.044.0-5.0105.0-6.046.0-7.067.0-8.0168.0-9.0159.0-10.024