База всех поисковиков

Подскажите где достать базу всех поисковиков интернета для регистрации? И имеет ли смысл регистрироваться в них?
Действительно, а что дает регистрация в этих поисковиках? Просто успокоение: "И я там есть!"?
Попыталась зарегить сайт в яндекс каталоге и вот что получилось: Адрес **** не был внесен в базу Яндекса, так как он запрещен к индексации в файле robots.txt, или при обращении к robots.txt сервер вернул ошибку 5xx.