robots.txt вы при индексировании не применяете что ли?
robots.txt вы при индексировании не применяете что ли?
это не бага, это фича
да, в robots.txt, пока, не смотрим. Тикет в системе у нас висит, но сейчас есть парочка более важных моментов, а роботс.тхт в четверг-пятницу должны довести до ума...
Ручками повычищать то можно потом, но мне этот как-то некошерным кажется - много клацать мне придется
полностью согласны, доведем до ума этот момент 100%
народ, а с robots.txt как дела?
сегодня купил линку. решил проверить robots
толку от линки где стоит:
User-agent: *
Disallow:
Это обычный robots.txt который не запрещает к индексации ничего. Вы покупаете ссылки и не знаете синтаксис robots.txt? А зачем?User-agent: *
Disallow:
хехе, я тоже не обратил внимание))))