Экзотические алгебры в нейросетях: 35 экспериментов опровергли преимущества

Авторы провели 35 контролируемых экспериментов, сравнивая кватернионные, октонионные и Clifford-слои с параметрически эквивалентными реальными аналогами. Ожидаемая эффективность и выразительность не проявились, за исключением одного случая, объяснимого особенностями оптимизации, а не магией. Исследование закрывает вопрос о практической пользе этих математических конструкций в современных архитектурах.