Накатал небольшой, простенький парсер + чекер под эту тему...



URL File - файл, линки из которого парсить (например, DMOZ база с содержимым вида http://asda.net/

Save urls with defined domain to - куда сохранять результаты парсинга файла

Save urls with text found - куда сохранять результаты чека.

Domain - домен который парсить ( / - любой ).

Append to url - дописать что либо к url-кам в файл результата

Внизу - добавлять то, что искать (список страница.php, например : какой текст искать на странице при чеке)

При 400+ потоках работает стабильно.

Зависимости: .net 2.0

Линк: http://www.mediafire.com/?vt148ct89bv4b4p (v1.0, в архиве билды x86 / x64)

С потоками лучше не преувеличивать - можно урвать DNS-бан.