Вода на воде. Ну вот, автор пишет: "Перед обновлением зафиксируйте метрики посещаемости. Для тестового домена нового сайта настройте robots.txt или соответствующий плагин в CMS: поисковики не должны индексировать тестовый сайт во время разработки." и нигде не сказано как отключить. Что сложно было кусок примера привести User-agent: Googlebot Disallow: User-agent: Mediapartners-Google Disallow: User-agent: Bingbot Disallow: User-agent: * Disallow: /
Вода на воде. Ну вот, автор пишет:
"Перед обновлением зафиксируйте метрики посещаемости. Для тестового домена нового сайта настройте robots.txt или соответствующий плагин в CMS: поисковики не должны индексировать тестовый сайт во время разработки."
и нигде не сказано как отключить. Что сложно было кусок примера привести
User-agent: Googlebot
Disallow:
User-agent: Mediapartners-Google
Disallow:
User-agent: Bingbot
Disallow:
User-agent: *
Disallow: /