Вы не поняли(Кстати, ресурс красивый, до бесполезности). Перекрываемые(шовные) дубли он не удаляет.

Если вопрос колом встал о сортировке, то это я погорячился. Можно дубли без сортировки удалить. Только, это на уровне быстродействия - ПЕНЬ, с глубокими корнями двоичной алгоритмизации.