Cursor выпускает Mixture-of-Kittens — оптимизированное ядро для обучения MoE-моделей с удвоением производительности

Cursor представила новое оптимизированное ядро Mixture-of-Kittens для обучения архитектур Mixture-of-Experts. По заявлениям разработчиков, решение почти удваивает TFLOP/s при тренировке MoE-моделей. Исходный код доступен на GitHub для сообщества.