Провели бенчмарк 18 LLM для OCR: дешёвые модели часто обходят флагманы

Команда провела масштабное тестирование 18 языковых моделей на задаче OCR, выполнив более 7000 вызовов. Результаты показали, что для стандартных документов старые и недорогие модели достигают точности флагманов при значительно меньших затратах. Исследователи открыли исходный код фреймворка и датасет для публичного использования.