Поведение поисковиков
Например есть сайт который любят поисковики, и выдают его в выдаче по разнообразным запросам. Внимание, вопрос:
Что будет, если в корне этого сайта внезапно появится robots.txt который все блокирует? (User-agent: *\n disallow: /)
И что будет, когда он позже исчезнет.