Всем добрый день!
У меня тут возник один вопрос: сижу значит я проверяю сайты сторонним сервисом на клей и вдруг смотрю у одного в robots.txt прописана папка линкфида и дизалоу стоит.
и вот у меня вопрос: получается, что и моя статья там никогда не проиндексируется? или я что-то не так понял?
ЗЫ: И еще почему одни сайты в системе присутствуют с www. а другие без?