-
Новичок
нагрузка роботов...
В последнее время роботы линка грузят хостинги до пиковой активности
( знаю что проверка ссылок происходит с промежутками времени, но факт фактом).
Нельзя ли прописать что под робот линкфида, чтобы проверял страницы например в интервал 10сек...
Crawl-delay: 10 чего-нибудь такое...
ЗЫ: Исправлена ли проблема с ненахождением ссылок якобы вне зоны индексации или что-то с анкорами?
Ваши права
- Вы не можете создавать новые темы
- Вы не можете отвечать в темах
- Вы не можете прикреплять вложения
- Вы не можете редактировать свои сообщения
-
Правила форума