llama-zip

lama-zip — это утилита командной строки для сжатия и распаковки текста без потерь с использованием большой языковой ИИ модели в качестве арифметического кодера.

поскольку для кодирования токенов, которые ИИ прогнозирует с высокой достоверностью, требуется меньше битов.

Основное ограничение llama-zip заключается в том, что скорость сжатия и распаковки ограничена скоростью вывода ИИ.

github.com/AlexBuz/llama-zip