Накатал небольшой, простенький парсер + чекер под эту тему...

URL File - файл, линки из которого парсить (например, DMOZ база с содержимым вида http://asda.net/
Save urls with defined domain to - куда сохранять результаты парсинга файла
Save urls with text found - куда сохранять результаты чека.
Domain - домен который парсить ( / - любой ).
Append to url - дописать что либо к url-кам в файл результата
Внизу - добавлять то, что искать (список страница.php, например : какой текст искать на странице при чеке)
При 400+ потоках работает стабильно.
Зависимости: .net 2.0
Линк: http://www.mediafire.com/?vt148ct89bv4b4p (v1.0, в архиве билды x86 / x64)
С потоками лучше не преувеличивать - можно урвать DNS-бан.