Как ускорить индексацию сайта: несколько ценных и полезных способов
Каждый уважаемый себя веб-разработчик наверняка задавался вопросом. Как улучшить индексацию сайта или свежей страницы? Что необходимо сделать для того, что бы страницы попадали в индекс и приводили новую аудиторию? Обо всем этом и не только поговорим ниже.
Почему сайт не попадает в индекс поисковиков
На самом деле у этой распространенной проблемы есть три типа:
- Новые страницы не индексируются. Одна из главных причин – в редкой публикации контента на сайте. Если долго и не регулярно выкладывать свежие статьи, робот не будет приходить к вам на сайт, соответственно не будет продвигать в поисковике.
- Несколько страниц не пробиваются в Яндексе и Google. В данном случае следует проверить настройки хостинга на наличие запретов в метатегах robots.txt.
- Нет индексации на одном из поисковиков. В таком случае проверти свой сайт на фильтры в неиндексированном поисковике. Проверить какие страницы сайта уже есть в индексе можно тут.
Две последних проблемы лечатся очень быстро и легко, достаточно проверить все настройки на наличие санкций от Яндекса. А вот как ускорить индексацию иными способами мы как раз и рассмотрим.
Какая у вас SEO-оптимизация сайта
Если настройки поисковика и хостинга не увенчались успехом, то рекомендуется обратить внимания на сам сайт, а именно: Наличия Robots.txt файла
- Проверьте исходный код на наличие файла robots. Его местоположения находится в папке сайта, и он должен пробиваться по такому адресу site.ru/robots.txt. Если не обнаружили, то необходимо создать, а об этом мы говорили здесь.
- После того как вы его нашли, следует так же проверить его на запреты в индексации. В незапрещенном файле robots не должно быть директивы Disallow:. Если есть, то сайт или одна из страниц полностью запрещена к индексации Яндекса или Google.
- Часто робот переходит на сайт и тратит свое время на проверку не нужных файлов. Например, архивов, удаленных страниц, тегов. Нужно закрыть доступ к не нужной для робота информации, тем самым, экономя его времени на проверку страниц.
Добавьте sitemap.xml
Файл sitemap хранит все ссылки, а так же помогает Яндекса и Google роботам быстрей найти нужные страницы. К примеру, вы создали новую страницу, и она автоматически попадает в sitemap. Если по какой-то причине ее у вас нет, то вот очередное решения проблемы в долгой индексации.
Как только вы создали sitemap, впишите в файле robots.txt данную строку:
Sitemap: http://site.ru/sitemap.xml- А для полной картины рекомендуется sitemap указать в Яндекс Вебмастер – инструменты, находим «Анализ файлов sitemap».
- Для Google практически аналогично – индекс, «Файл sitemap.
Нет желания постоянного ручного добавления файла sitemap, на этот счет все уже придумано для вашего удобства. Перед вами sitemap.xml – настройка и добавления новых страниц осуществляется через встраивание «All in One SEO Pack». Плагин регулярно создает файл sitemap перед каждым посещением робота.
Публикуйте уникальные и интересный контент
Большинство владельцев сайтов удивляются, почему их контент не пробивается в поисковиках. Одной из распространенной проблемы является неуникальные статьи и фото. Поисковые системы считают такие статьи не интересными и дублирующими другие сайты. Но и неуникальный контент, может попасть в поисковик. Об этом мы говорили в статье «Можно ли раскрутить новый сайт не уникальным контентом? Очень легко!»
По чаще добавляйте новые статьи
Яндекс и Google любят, когда сайты регулярно обновляют свои сайты свежими статьями. Если забыть про сайт на несколько месяцев, соответственно и робот забывает о вас.
Как правильно поддерживать сайт, не допуская просадок в индексации:
- Старайтесь публиковать свежие статьи хотя бы раз в неделю;
- Вставляйте ссылки в новые статьи со старых страниц;
- Обновляйте информацию;
Избавьтесь от дублей на сайте
Речь не идет о дублированных страницах или всего сайта. Дубли, о которых мы говорим, являются техническими. Например, интернет магазин, который вмещает в себе более 1000 товаров схожих между собой, пусть это будут кроссовки. Имеет под каждым товаром описания, в котором может дублироваться названия или заголовок товара. Так вот, стоит каждый товар уникалезировать, пишите каждый раз уникальное описания товара. Дубли так же встречаются в URL, например, в ссылке первым делом прописывается названия сайта, затем идет категория и имя товар. Большинство не опытных пользователей оставляют практически одинаковую ссылку на всех 1000 объявлениях, что соответственно влечет за собой повторения страниц. На что это влияет, когда робот в очередной раз заходит на сайт, он начинает искать те страницы, которые не просматривал и не допускал к индексации, а так как он видит практически одну и тот же URL, он думает, что работа выполнена, можно уходить.
Создавайте ссылочную массу
Данная функция позволяет вам быстрей индексировать сайт благодаря размещению ссылок на сторонних ресурсах. Как это работает – вы пишете пару уникальных текстов и вставляете в них свою ссылку на сайт, тут неважно какую, можно на статью, а можно главную страницу. Главное, что бы повыситься в глазах поисковиков и стать более заметным для робота. Ссылки размещать можно на форумах по вашей тематики сайта, ну или приближенной. Главное условие, что бы эти самые ссылки были кликабельные, то есть человек мог нажать и перейти. Таким способом вы не только станете заметнее, но и дополнительно получите трафик на сайт, что тоже очень хорошо.
