Назад к дайджесту
Новость

Нейросети по рецепту: вычисляем веса вместо хранения матриц

Статья исследует методы сжатия нейросетей, при которых вместо хранения огромных матриц весов используется компактный алгоритм или формула для их генерации. Рассматриваются подходы от генеративных сетей до фрактальных структур и оценивается их применимость для запуска больших языковых моделей на ресурсоёмких устройствах.