Question

Кроме Гугла, Яндекса и Yahoo сегодня пожаловали на сайт 5912 роботов.  И вчера немало. Не перебор ли с роботами? Они не причинят вред сайту? Если да, то что делать, как защититься от них? Если запретить посетить всем роботам, то и поисковые (нормальные, хорошие) роботы не смогут попасть.  С уважением Евгений.

Answer 1

Не стоит этого бояться, роботы просканируют сайт и пойдут далее, у каждого кто имеет свой сайт были подобные ситуации и не раз, не стоит этому сильно уделять внимание.