Как использовать robots.txt и кеш Гугла
Как использовать robots.txt и кеш Гугла
Принял решение перепроверить грубо говоря уже знаменитые факты про то, как ведут себя Yandex