Нашлась такая штука, как DAWG. Старый алгоритм, применялся еще в Crack от Alec Muffett.

Работает только на словарях, сортированных по алфавиту.

Налилуший результат дает, если сжать словарь в DAWG, а потом уже архиватором общего назначения.

hhttps://oylenshpeegul.github.io/Compress-DAWG/

https://github.com/oylenshpeegul/Compress-DAWG

(Надо прилжить руки, чтобы получить готовую утилиту.)

Эксперимент. Размер в байтах. Аргументы 7z a -t7z -m0=lzma2 -mx=9 -mfb=64 -md=32m -ms=on