Сегодня для Гугл роботс - это скорее приманка, все что в роботс индексирует и еще ругается. что в роботс важные страницы запрещены к индексации. Может у него новый алгоритм куда-то сбился?