AI News

Marin: Nachrichten

2 Meldungen über Marin.

BerichtetModelle ·

Marin schließt Haupt-Pretraining des 535B-Modells Mochi auf 18T Token ab

Laut Marin hat das Modell Mochi 535B-A23B das Haupt-Pretraining auf 18T Token abgeschlossen. Als Nächstes folgen Long-Context-Training und Fine-Tuning.

Warum es wichtig ist: Ein Modell mit 535B Parametern, davon 23B aktiv, ist ein weiterer großer Open-Weight-Kandidat, der sich in Entwicklung befindet. Gewichte oder Evaluierungen liegen bisher nicht vor.

1 Quelle