Индексирование сайта

Любые легальные способы продвижения и комплексная раскрутка сайта очень зависят от индексации страниц поисковыми системами. В Российской Федерации большую актуальность имеет поисковая система Яндекс. Для того чтобы ускорить этот процесс, необходимо обратить внимание на следующие моменты и провести определенные действия. В первую очередь следует добавить сайт в поисковую систему, используя инструменты «Вебмастер». Создание карты сайта также является очень важным фактором, влияющим на индексацию страниц. Этому моменту стоит уделить отдельное внимание. Карта сайта представляет собой отдельный сайт формата XML, включающий полную структуру ресурса с адресами всех страниц сайта. Воспользовавшись специальным разделом сервиса Яндекс, можно загрузить файл Sitemap и предоставить поисковому роботу данные о страницах и документах, требующих индексации. Создание карты сайта – задача разработчика ресурса или человека, ответственного за его раскрутку. При изменении структуры, добавлении новых страниц следует обновлять этот файл и перезагружать его в разделе «Вебмастера».

Файл Robot.txt - это документ, также создающийся для поисковых роботов. Раскрутка сайта может быть неэффективной, если содержание этого файла имеет ошибки. Robot.txt должен содержать параметры для индексирования страниц для всех поисковых роботов. Директива Disallow используется для закрытия отдельных разделов ресурса от индексирования. Ее можно использовать для скрытия конференциальных разделов, файлов статистики, баз данных, административных панелей и так далее. Директива Crawl delay указывает роботу минимальный интервал между обращениями к страницам ресурса. Она может быть полезна для больших, громоздких ресурсов, содержащих несколько тысяч страниц. Установка интервалов требуется для уменьшения нагрузки на сайт со стороны поискового робота.

Поисковая система Яндекс имеет некоторые ограничения на индексацию страниц, на которые стоит обратить внимание. Избегая использования таких ошибок позволит получить стопроцентную индексацию сайта. В таком случае раскрутка сайта будет максимально эффективной. Перечислим, к каким документам и страницам Яндекс относится негативно:

• большое количество повторяющихся директорий с многоуровневым вложением;

• очень длинные URL страницы также приводят к ухудшению индексации;

• оптимальный размер для индексации – до 10 Мб, файлы большего размера не индексируются;

• файлы flash индексируются только в тех случаях, если они интегрированы в структуру HTML с использованием корректных тегов, если на них есть прямая ссылка;

• текст в виде картинок не индексируется;

• в файлах PDF индексируется только текстовое содержимое.