SenseNova-Loop-9B durchläuft 24 seiner 32 Layer doppelt, Autoren melden GAIA-Anstieg auf 69,90
Das Release von SenseNova-Loop-9B schickt 24 seiner 32 Layer ein zweites Mal durch die Berechnung. Laut den Autoren steigt der GAIA-Wert von 37,86 in der Preview auf 69,90.
SenseNova-Loop-9B durchläuft 24 seiner 32 Layer ein zweites Mal. Nach Angaben der Autoren ist der GAIA-Score des Modells von 37,86 in der Preview auf 69,90 im Release gestiegen. Lokale Nutzer wollten wissen, wie viel Speicher bei langem Kontext noch für den KV-Cache bleibt.
Was sich ändert
Art: Neue Funktion · Betrifft: SenseNova-Loop-9B
Warum es wichtig ist
Architekturen mit mehrfach durchlaufenen Layern könnten kleinen lokalen Modellen auf derselben Hardware zu besseren Ergebnissen verhelfen. Der Speicherbedarf bei langem Kontext muss aber erst noch unabhängig gemessen werden.
Originalquelle
Für diese Meldung haben wir noch keinen Link zur Originalquelle.
Wo wir es gesehen haben
Latent Space
KI hat diese Zusammenfassung aus den genannten Quellen geschrieben und ins Deutsche übersetzt. Niemand hat sie vor der Veröffentlichung einzeln geprüft. Bitte prüfen Sie die Originalquelle, bevor Sie sich darauf verlassen. So funktioniert es