Создай .htaccess в корне домена и вставь туда готовый список ботов

список доменов и ботов

список 1900 ботов