sitemap.xml
файлы ( http://en.wikipedia.org/wiki/Sitemaps ) включают элемент
это указывает, как часто поисковая система должна проверять наличие обновлений. Создание карты сайта и установка для этих URL-адресов ежемесячный, ежегодный или никогда не использующийся режим должно снизить частоту, с которой Google сканирует эти URL-адреса.
Вы можете установить метатег nofollow
< META NAME = "ROBOTS" CONTENT = "NOINDEX, NOFOLLOW">