Блиц-опрос

Ваше мнение очень важно для автора сайта! Оцените дизайн и контент сайта:

Круто - 50%
Нормалёк - 18.8%
И так сойдет - 18.8%
Полный отстой - 12.5%

Проголосовали: 16
Голосование для этого опроса закончилось on: 31 Дек 2017 - 00:00

Способы индексации сайта

1

Самый важный момент: если хотите, чтобы ваш сайт был проиндексирован, удостоверьтесь, что в корневой папке вашего сайта лежит файл robots.txt и он правильно составлен. Этот файл содержит инструкции для поисковых роботов. А то можно случайно запретить индексацию для всех поисковиков в файле robots.txt, потом ждать несколько месяцев индексации а еще потом вопить на весь интернет о том, что ваш сайт не индексируется. Правильно составленный файл robots.txt (с директивами, разрешающими индексацию сайта) — абсолютно необходимое условие для индексации сайта (страниц сайта).

Так выглядит содержимое файла robots.txt, разрешающее индексировать всем поисковым сервисам все и вся на вашем сайте (для сайтов на основе движка все это будет выглядеть по-другому — нужно прописывать директивы, запрещающие индексацию многих каталогов):

User-agent: *
Disallow:

Обычно веб-мастера говорят о трех способах индексации сайта.

 

Способ № 1

Дать знать поисковым сервисам (каждому в отдельности) о том,

что вот появился новый сайт. Как это сделать? Несложно. Для
Яндекса нужно просто пройти по ссылке http://webmaster.yandex.ru/
и зарегистрироваться, для Гуглаhttp://www.google.ru/intl/ru/webmasters/
и тоже зарегистрироваться.

Способ № 2

Добиться появления ссылки на ваш сайт с любого уже проиндексированного сайта. Можете договориться с владельцем сайта (а это может быть и ваш приятель) схожей тематики. Путь непростой и муторный. Важная оговорка — робот поисковика перейдет по ссылке на ваш сайт и «увидит» новый сайт (ваш!) лишь тогда, когда робот в очередной раз зайдет на страницу со ссылкой на ваш сайт и не увидит запрещения переходить по этой ссылке.

Способ № 3 

Вообще ничего не делать! Поисковики проиндексируют ваш сайт без вашего участия. Все поисковые сервисы заинтересованы в том, чтобы как можно больше сайтов было в их индексе. Именно поэтому роботы-программы всех поисковиков обходят серверы хостеров в поисках новых и измененных сайтов. И в конце концов обнаружат, запросят и проиндексируют ваш сайт.

Какой способ лучше — не знает никто, можно использовать любой. Первый способ вероятно самый правильный и надежный. Карта сайта в формате, приемлемом для поисковиков действительно убыстряет индексацию страниц сайта. У каждого веб-мастера свой уникальный опыт. В случае с данным сайтом индексация проходила так, как изложено ниже.

В день «Х» я подкорректировал сайт robots.txt (убрал запрет всем роботам индексировать сайт). И спокойно начал ожидать индексации, ничего не предпринимая. Через два дня три страницы сайта были проиндексированы поисковиком MCN. Еще через два дня Yandex проиндексировал две страницы и Google — три страницы. То есть способ#3 реально работает. Далее я зарегистрировал сайт в Yandex и Google. Попутно я разместил в обоих сервисах ссылки на карту сайта (она была готова к моменту разрешения индексации). Количество проиндексированных страниц возрастала с каждым днем. Итог — практически через месяц после публикации сайта в сети все страницы сайта Yandex и Google проиндексировали. Остальные поисковики меня не особо волновали.

В любом случае, при любом способе ваш сайт после того, как вы его выложили в интернет, будет проиндексирован за несколько дней, ну, может, за месяц. А как узнать, проиндексирован ваш сайт или нет, или сколько страниц проиндексировано? Отсылаю вас к сервисам поисковиков — там есть все инструменты.

Очень много нюансов и деталей осталось за рамками данного материала. Несколько раз переделывал статью, потом полностью переписал. И все равно остался недоволен. Цель изначально была — доступным языком, «на пальцах» объяснить суть индексации сайта. Очень надеюсь на ваши комментарии.

Добавить комментарий

Защитный код
Обновить

Поделитесь с друзьями!

Поиск по сайту