proview.ruКонструирование сайтов → Как запретить сайт от индексации?

Как запретить сайт от индексации?

Как запретить сайт от индексации?
Опубликовано 25 Авг 2010 в рубрике «Создание сайтов»

«Тонкости при выборе слов для продвижения

Сначала давайте определим причины для закрытия сайта. Причин может быть несколько. Вот самые частые:

1.У вас полным ходом идет разработка сайтов. Один из них находится на стадии редактирования и вы не хотите, чтобы посетители попадали на незаконченный проект.

2.Вы делаете новый дизайн к уже существующему сайту на другом домене или поддомене и не хотите, чтобы он мешал продвижению главного сайта.

3. Сайт нарушает правила поисковых систем (например, размещаются порно материалы, скопированные с других сайтов тексты и т. п.) и вы не хотите, чтобы домен забанили. Трафик можно получать и без поисковых систем, а сайт запретить к индексации.

4.Вы ведете личный блог и не хотите, чтобы его кто-то читал, в этом случае, если сайт закрыть от индексации, то на ваш блог практически со 100% гарантией никто не попадет.

Вот, вроде бы, самые распространенные причины, по которым сайты запрещают к индексированию. Возможно существуют и другие, но это особой роли не играет и способы закрытия сайта от индексации от этого не зависят.

Способов знаю два. Может быть, есть и другие, но эти самые распространенные и эффективные:

1.Запретить сайт в файле robots.txt. Делается это так — создается файл robots.txt (если его нет) и в нем пишутся такие строки:

User-agent: *
Disallow: /

Где значок * означает, что правило задается для всех поисковых систем, если вы хотите запретить от индексации в какой-то определенной поисковой системе, то нужно ее указать, например, так yandex или google.
В строке Disallow: значок / указывает на то, что весь сайт запрещен к индексации.

2. Этот способ позволяет запретить сайт к индексации без использования файла robots.txt. Запрещаем сайт в самом коде сайта с помощью мета тегов.

Делается это так — в коде шапки сайта после тегов

<html>
<head>

пишутся запрещающий мета тег:

<meta name=“robots” content=“noindex,nofollow”>

Причем нужно писать так, чтобы этот код присутствовал на каждой странице сайта. Это уже зависит от типа движка, если сайт написан на html, то код нужно прописать на каждой странице. На wordpresse, например, код достаточно вписать в файле header.php.

Главное не забывайте потом убрать все запреты, когда снова понадобится разрешить сайт к индексированию. А то у меня был случай, когда после разработки нового сайта, он вылетел из индекса, оказалось, что забыл убрать мета теги )))

Источник: www.serp.by

Популярное