Назад к дайджесту
Reddit

Выпущена гибридная языковая модель SupraBrain-50M-v0.1

Команда SupraLabs представила новую гибридную языковую модель на 50M параметров, сочетающую Gated DeltaNet linear recurrence с Sliding-Window Attention и механизмом Surprise-Gated update. Модель обучена на 5B токенах (в 4 раза меньше аналогов) и демонстрирует конкурентную производительность. Модель доступна на Hugging Face.

score 55r/LocalLLaMA