Совместное понимание и генерация изображений: самокорректирующиеся связанные марковские процессы

Исследователи из Google DeepMind и Stony Brook University представили метод CO₂Jump для согласованной параллельной генерации текста и изображений. Подход использует уверенность модели и кросс-модальное внимание для корректировки генерации, позволяя пересматривать ранее сгенерированные токены без дополнительного обучения.