Назад к дайджесту
Reddit

Универсального детектора галлюцинаций не существует, но есть универсальный порог — предрегистрированное исследование 10 моделей

Независимый исследователь проанализировал 29 внутренних сигналов (внимание, геометрия остаточных связей, уверенность модели) на 10 языковых моделях для детектирования галлюцинаций до генерации первого токена. Результаты показали: универсального детектора нет (сигналы работают по-разному для разных моделей), но существует универсальный порог выше случайного — все данные и код открыты для верификации.

score 40r/MachineLearning