Сравнение моделей на 5 алгоритмических задачах: 16 ГБ VRAM, 32 ГБ ОЗУ (версия 2)

Автор опубликовал обновленные результаты бенчмарка, тестирующего различные языковые модели на алгоритмических задачах при ограниченных ресурсах (16 ГБ видеопамяти). В обновленном наборе задач и моделях особое внимание уделено производительности CyberTiel и Ornith, тогда как LFM и Mellum показали низкие результаты на реальных нагрузках. Доступен репозиторий с кодом и таблицами результатов для воспроизведения тестов.