Как запретить индексацию сайта.
11.01.2013
Довольно часто нужно для тестов поднять копию сайта, локальная версия не всегда удобна – показать ее клиенту проблематично. Для таких сайтов индексацию нужно полностью запретить.
Самый простой способ это разместить в корне сайта файл с содержимым:Самый простой способ это разместить в корне сайта файл robots.txt с содержимым
User-agent: * Disallow: / |