AI News

Nace AI: Nachrichten

2 Meldungen über Nace AI.

OffiziellForschung ·

Artificial Analysis startet Decision Index v2 mit kalibrierungsgewichteter Bewertung

Artificial Analysis hat Version 2 seines Decision Index veröffentlicht: 45 % der Bewertung beruhen nun auf privaten Datensätzen, und die zentrale Kennzahl belohnt gut kalibrierte Konfidenz.

Warum es wichtig ist: Teams, die Entscheidungsmodelle auswählen, sehen hier, dass Kosten pro Task und Kalibrierung die Rangliste verändern können und dass eine Abrechnung pro Frage ein Modell um ein Vielfaches teurer machen kann als ein anderes mit ähnlichen Listenpreisen.

1 Quelle
BerichtetModelle · · Aktualisiert

Offene Drex-Modelle von Nace AI liefern Antwortwahrscheinlichkeiten ohne Textgenerierung

Die offenen Entscheidungsmodelle Drex von Nace AI geben Wahrscheinlichkeiten für Optionen aus, ohne Text zu erzeugen. Laut einem Paper erreicht das 27B-Modell Max 67,52 Punkte im Decision Index 0.4.1.

Warum es wichtig ist: Teams, die Klassifizierungs- oder Routing-Entscheidungen treffen, können kalibrierte Optionswahrscheinlichkeiten in einem einzigen Forward Pass erhalten. Das kann Latenz und Kosten gegenüber der Generierung von Antworten senken.

2 Quellen