Artificial Analysis startet Decision Index v2 mit kalibrierungsgewichteter Bewertung
Artificial Analysis hat Version 2 seines Decision Index veröffentlicht: 45 % der Bewertung beruhen nun auf privaten Datensätzen, und die zentrale Kennzahl belohnt gut kalibrierte Konfidenz.
Warum es wichtig ist: Teams, die Entscheidungsmodelle auswählen, sehen hier, dass Kosten pro Task und Kalibrierung die Rangliste verändern können und dass eine Abrechnung pro Frage ein Modell um ein Vielfaches teurer machen kann als ein anderes mit ähnlichen Listenpreisen.