PROMPTIF_
Benchmarks

Confiance d’un modèle IA : comprendre le score 0,9 avec basal mini

promptif@ai:~$ cat news_1

› Un score de confiance de 0,9 ressemble à une promesse : le modèle devrait avoir raison neuf fois sur dix.

promptif@ai:~$ cat news_2

› Pourtant, ce chiffre ne prouve rien à lui seul.

promptif@ai:~$ cat news_3

› Il faut le comparer aux réponses correctes obtenues sur des données proches de celles qui seront utilisées dans l’application.

promptif@ai:~$ cat news_4

› Voici comment comprendre la calibration, avec des calculs réalisés à partir des résultats enregistrés de trois modèles et un script Python simple.

promptif@ai:~$ open --full
Lire la suite

Confiance d’un modèle IA : comprendre le score 0,9 avec basal mini

Ouvrir l'article sur promptif.fr