ANTICHAT — форум по информационной безопасности, OSINT и технологиям

Обновил ранние обещанный словарь который 253гига весил

прислушался и почистил как смог словарь фильтром

@ Почта, IP, md5

Так как видео карты обновляются чуть ли не каждый день....

Если ссылки не рабочие то ничего поделать не смогу но источники вот

https://hashes.org/left.php

http://wordbook.xyz/download/

https://myspace.thecthulhu.com/

http://anton-kuzmin.ru/titan-

http://weakpass.com/

https://blog.g0tmi1k.com/2011/06/dictionaries-wordlists/

https://downloads.skullsecurity.org/

https://packetstormsecurity.com/Crackers/wordlists/

http://www.outpost9.com/files/WordLists.html

http://www.openwall.com/passwords/wordlists/

http://www.torrentroom.com/torrent/3074471-WordList-Collection.html#b3

http://zacoop.ru/

Словари Shedz 160гиг

VKdump

BreachCompilation

Словари темы античата а также другие словари что слиты в инете вошло что только либо мной натыкалось...

Cловари которые имели кривые записи и в других форматах

было трудно обработать программами с фильтрами.

Думаю 2 или 3 терабайта занимали бы не обработанные а может и больше......

Использовал выдрать с мыл ники

допустим:

[email protected]

забрал:

vasa1234

Сами мыла сюда не вошли

У Словаря нету дублей и меньше 8 знаков и больше 64

Сразу говорю кракозябры с 3 до 5 гиг присутствуют

38 гиг распакованный 265 гиг

на torrent буду около недели в роздаче

https://yadi.sk/d/k15MzO6Y3TR53N

Только мыла почти 7 гиг распаковка 38 гиг

https://yadi.sk/d/EysuEHaI3TR592

Сейчас что то сильно провайдер стал лагать...как назло ни закачки ни отдачи,на данный момент то стоит то отдает,просьба кто скачал повисеть на раздаче не будьте жадными.

fire-dance, спасибо огромное. А пароли в виде Российских телефонов там тоже есть? +7(906)1111111, +79061111111, 89061111111, 9061111111 - такого типа

Повишу на раздаче специально подольше)))

Вы нашли 2-х терабайтный диск всё таки? Как я понял он отличается от XXXL.7z, правильно?

Там может быть небольшое количество но,сам словарь всех рус телефонов полностью 16 гиг,он туда не входил

Кардинально отличается

Огромное спасибо, за ваш труд!!! Скачал в свою коллекцию.

fire-dance, большое спасибо.

На заметку:

1) удаляем крякозяблы (Линукс):

grep -v -P '[\x{0000}-\x{001F}]|[\x{FFFD}]' XXXL.txt > new.txt

Чтобы проверить, что удалилось:

grep -P '[\x{0000}-\x{001F}]|[\x{FFFD}]' XXXL.txt > musor.txt

2) удаляем UTF-8:

grep -v -P '[\x{0000}-\x{0080}]' new.txt > ASCII.txt

3) UTF-8 в новый файл:

grep -P '[\x{0000}-\x{0080}]' new.txt > UTF8.txt.


[COLOR="rgb(255, 255, 255)"]Ну и в конце разбиваем UTF-8 по языкам:[/COLOR]

[COLOR="rgb(0, 255, 128)"]grep -i -P '([\x{4E00}-\x{9FBF}]|[\x{3040}-\x{309F}]|[\x{30A0}-\x{30FF}])+' UTF8.txt > Asian.txt[/COLOR] (иероглифы)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[\x{0600}-\x{06FF}]' UTF8.txt > arabic.txt[/COLOR] - (арабский)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[\x{0386}-\x{03CE}]' UTF8.txt > greek.txt[/COLOR] - (греческий)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[\x{0590}-\x{05FF}]' UTF8.txt > hebrew.txt[/COLOR] - (еврейский)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[ĄĆĘŁŃŚŹŻ]' UTF8.txt > polnish.txt -[/COLOR] (польский)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[а-я]' UTF8.txt > russian.txt -[/COLOR] (русский)

[COLOR="rgb(0, 255, 128)"]grep -i -P '[İŞĞışğ]' UTF8.txt > turkce.txt[/COLOR] -турецкий. Для него удалить потом все строки с è,à,é

У кого не работает (специалъно для XXXL) - Внимание! Возможно, чо некоторые строки будут при этом испорчены. Если есть сомнения, то ручками в EmEditor/Notepad++/Ultrapad!:

1) Сначала перекодируем файл в UTF-8:

iconv -f ISO-8859-1 -t UTF-8 1.txt > 1a.txt

2) Форматируем в Линукс-формат:

tr -d '\r' 1b.txt

3) Применяем grep-команды

grep -P '[\x{0000}-\x{001F}]|[\x{FFFD}]' 1b.txt > 1-musor.txt


Некоторые файлы (например 260-265.txt) нужно открытъ в текстовом редакторе типа EmEditor как UTF8 и сохранятъ там же в виде UTF8. Иначе есть риск получения сплошных крякозяблов!!!

Проблема всех этих листов:

Иногда до 3 кодировок в одном файле или бинарики и попробуй разберись...

Кто-нибудь мохет подсказать, как линуксом разбить файл по первым двум буквам/цифрам на новые файлы???? Желательно без предварительной сортировки...

T.e.: было XXXL.txt. Стало: аа.txt, ab.txt, ac.txt... zx.txt, zy.txt, zz.txt, 00.txt... 9z.txt.

Я в линуксе не заморачиваюсь,у меня тупо ни мой проц не стает ни один линукс ,даже через флешку не грузиться,только вертуалька идет,чтобы я не делал...

За совет спасибо

Вот через винду можно сделать но с сортировкой