Многие уже заметили, а многих он уже задел фильтр под названием "АГС - 17"
Уничтожает все на своем пути. Оставляет в индексе до 17 страниц, в основном 1-10
Робот анализирует содержание всех страниц сайта и принимает решение о включении их в индекс. Если сайт большой, а в поиске участвует лишь несколько его страниц, это означает, что остальные были классифицированы как не имеющие дополнительной ценности для пользователей.