Назад к дайджесту
Reddit

Призыв к контролю качества в публикациях о производительности моделей

Автор поста выражает недовольство публикациями с высокими показателями скорости генерации токенов без предоставления необходимой технической информации. В качестве решения предлагается внедрить строгие стандарты отчетности, включающие спецификации оборудования, параметры квантования, метрики качества (perplexity/KLD) и полные настройки среды для обеспечения воспроизводимости результатов.

score 40r/LocalLLaMA