Я вот что думаю. Может быть реализовать некий регулятор потоков? Смысл в том, чтобы алгоритм автоматом снижал (ограничивал) максимальное количество потоков при достижении определенного количества активных сессий. Это позволит делать более качественный парсинг, в то же время избегая забивания канала и снижения количества таймаутов. Поля для значений сделать кастомными, чтобы каждый мог регулировать балансировку под свой канал.