Этот пост я думал написать в самую последнюю очередь, поскольку для его написания нужно очень многое обдумать, как Вам его проще расписать. И скорее всего текста и скриншотов тут будет много. Даже печатая сейчас этот текст, я всё еще не могу придумать заголовок к данному посту. Возможно, это связано с тем, что я сейчас работаю параллельно над реализацией этой идеи уже над 3-м сайтом. Ну давайте начнем с того, что я хотел бы поделиться с Вами одним экспериментом, который у меня получился.

И так, у Вас есть сайт с N количеством страниц в поисковой выдаче. Например это количество 5,000 страниц. Но на сайте у Вас есть еще 20,000 страниц. Естественно, у Вас возникает желает скормить эти страницы поисковому роботу и сделать так, что бы они вошли в поисковый индекс.

Переходим к наглядному скриншоту, он сделан с моего личного опыта:

Как видно с скриншота, на сайте (4 апа поисковой выдачи Яндекса назад) в поисковой выдаче Яндекса было 30,000 - 32,000 страниц, но в последние "Апы" это количество выросло в два раза, и держится этот показатель (в индексе 69,000 страниц) уже третий ап.

Что же произошло?

Не успел еще настроить полную работоспособность сайта как буквально, ну минут через 15 уже наспамили в каментах.

Дело житейское, но откуда такая индексация сайтов и бомбежка спама? Если учесть что раньше мой сайт был вообще на чистом html и формы добавления комментариев не было то такая скорость заспамки ресурса меня реально удивила.

Ну что же, будем бороться с этим вот такими методами.