Решил создать собственную авторегрессионную модель

Автор реализовал генеративную модель, заменив стандартный VQVAE на скалярно-квантованный аналог для улучшения качества. Проект демонстрирует генерацию китайских иероглифов с помощью компактного трансформера, обходя ограничения классических подходов. Это технический показ архитектуры, применимой к любым последовательным моделям.