Запрет индексирования
<META NAME="ROBOTS" CONTENT="NOINDEX">
(X-Robots-Tag: noindex)
Запрет следования по ссылкам
<META NAME="ROBOTS" CONTENT="NOFOLLOW">
Запрет создания архивной копии
<META NAME="GOOGLEBOT" CONTENT="NOARCHIVE">
Запрет вывода ссылки на архивную копию и похожие страницы. Также автоматически запрещает создание архивной копии.
<META NAME="GOOGLEBOT" CONTENT="NOSNIPPET">
(X-Robots-Tag: noarchive, nosnippet)
Запрет индексирования страницы после определенной даты
<META NAME="GOOGLEBOT" CONTENT="unavailable_after: 25-Aug-2007 15:00:00 EST">
(X-Robots-Tag: unavailable_after: 7 Jul 2007 16:30:00 GMT )