Иногда нужно сообщить поисковым машинам (роботам), что данную страницу индексировать не нужно. Для этого существует META-тэг:
<meta name="robots" content="noindex, nofollow" />
В данном случае «noindex» указывает на запрет индексации, а «nofollow», что на данной странице не надо обходить ссылки.