HOME    FORUMS    MEMBERS    RECENT POSTS    LOG IN  
Баннер 1   Баннер 2

ANTICHAT — форум по информационной безопасности, OSINT и технологиям

ANTICHAT — русскоязычное сообщество по безопасности, OSINT и программированию. Форум ранее работал на доменах antichat.ru, antichat.com и antichat.club, и теперь снова доступен на новом адресе — forum.antichat.xyz.
Форум восстановлен и продолжает развитие: доступны архивные темы, добавляются новые обсуждения и материалы.
⚠️ Старые аккаунты восстановить невозможно — необходимо зарегистрироваться заново.
Вернуться   Форум АНТИЧАТ > БЕЗОПАСНОСТЬ И УЯЗВИМОСТИ > Песочница
   
Ответ
 
Опции темы Поиск в этой теме Опции просмотра

  #1  
Старый 04.05.2018, 12:44
Teberium
Guest
Сообщений: n/a
Провел на форуме:
3747

Репутация: 0
По умолчанию

Имея 3 словаря, допустим, по 10 Гб в txt формате, хочу объединить их в один словарьout.txt(30Гб) и в далее хочу убрать повторяющиеся строки(пароли) из этого файла, как это реализовать у себя на пк?

Может есть команды для объединенияи очистки дублей(+ сортировки) или специализированный софт?

Имею две OC Kali и W10.
 
Ответить с цитированием

  #2  
Старый 04.05.2018, 17:34
Andrey9999
Guest
Сообщений: n/a
Провел на форуме:
850452

Репутация: 64
По умолчанию

объединить: cat 1.txt 2.txt 3.txt > out.txt

сортировать и удалить повторы: sort -u out.dic > sorted.dic
 
Ответить с цитированием

  #3  
Старый 04.05.2018, 23:35
Teberium
Guest
Сообщений: n/a
Провел на форуме:
3747

Репутация: 0
По умолчанию

Цитата:
Сообщение от Andrey9999  
Andrey9999 said:

объединить:
cat 1.txt 2.txt 3.txt > out.txt
сортировать и удалить повторы:
sort -u out.dic > sorted.dic
А изменить количество строк в файле out.txt можно с помощью команды uniq -s 3-8?

Получается конечный команды:

1.cat 1.txt 2.txt 3.txt > out.txt

2.sort -u out.txt > sorted.txt

3.uniq -s 3-7 sorted.txt sorted3-7.txt

И получим словарь без повторов с кол-во символов от 3 до 7, верно?
 
Ответить с цитированием

  #4  
Старый 05.05.2018, 02:36
Andrey9999
Guest
Сообщений: n/a
Провел на форуме:
850452

Репутация: 64
По умолчанию

Цитата:
Сообщение от Teberium  
Teberium said:

А изменить количество строк в файле out.txt можно
не совсем понятно что требуется - посмотри здесь
 
Ответить с цитированием

  #5  
Старый 05.05.2018, 03:49
Andrey9999
Guest
Сообщений: n/a
Провел на форуме:
850452

Репутация: 64
По умолчанию

если нужно оставить слова только с от 3 до 7 символами, то: sed -r '/^.{3,7}$/!d' sorted.txt > ot3do7.txt
 
Ответить с цитированием

  #6  
Старый 10.03.2022, 12:31
Teberium
Guest
Сообщений: n/a
Провел на форуме:
3747

Репутация: 0
По умолчанию

Доброе время суток Antichat, вопрос такой - у меня есть 10 словарей для брута, нужно убрать из них дубликаты(почистить) не объединяя их в один, как такое провернуть?

Интересно есть софт на подобии duplicut-master?

Помогите пожалуйста
 
Ответить с цитированием
Ответ





Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 


Быстрый переход




ANTICHAT.XYZ