tinyjuice: алгоритм сжатия токенов без потерь

Проект tinyjuice представляет собой алгоритм сжатия токенов, позволяющий уменьшить их количество до 95% без потери информации. Инструмент является бесплатным и с открытым исходным кодом, что делает его полезным для оптимизации работы языковых моделей.