Как загнать страницу в индекс

За лето 2015 года при продвижении сайтов мы столкнулись с проблемой, что Яндекс медленно индексирует страницы сайтов, то есть переиндексация или добавление новых страниц может занимать до 1,5-2 месяцев.

Так было и раньше, но летом этого года проблема стала особенно распространенной, и всё чаще мы видим подобную ситуацию. Скорее всего, учащение случаев медленной индексации страниц связанно с техническими работами на стороне Яндекса, которые они проводили в середине 2015 года.

Вот одно из многочисленных писем с подтверждением нашей гипотезы. Ответ Платона на вопрос – почему страницы сайта вылетели из индекса?

Чтобы помочь поисковому роботу быстрее посещать страницы сайта мы составили список рекомендаций для seo-оптимизаторов. Все они делятся на 2 группы: внутренние и внешние работы. Итак начнем.

Внутренние работы по сайту

1. Sitemap.xml
Следите за тем, чтобы все необходимые страницы сайта были добавлены в файл sitemap.xml, при этом:

- карта сайта для поисковых систем доступна по адресу - mysite.com/sitemap.xml;
- дата последнего обновления была не более чем 60 дней;
- путь к карте сайта указан в файле robots.txt;
- карта загружена в вебмастера поисковых систем.

Вот так выглядят ссылка в файле sitemap.xml

И ссылочка на довольно неплохой бесплатный генератор в режиме онлайн www.mysitemapgenerator.com.

2. Внутренние ссылки
На новые страницы обязательно должны идти хотя бы несколько ссылок с других страниц.
Если это конечная карточка товара, то используйте перелинковку:

- похожие товары/услуги;
- рекомендуемые товары/услуги;
- популярные товары/услуги и хиты продаж.

3. Время добавления новых страниц
Если новые страницы сайта добавляются редко (менее чем 1 раз в месяц), то скорость индексации уменьшается, так как робот реже посещает сайт.

Чтобы этого не допустить, просто заливайте хотя бы 2-3 небольшие новости ежемесячно на сайт и обновляйте sitemsp.xml.

Внешние работы по сайту

1. Инструмент – проверить URL
В Яндекс есть инструмент для проверки страниц.  При добавлении в поле URL через несколько секунд (не сразу) появится информация о желаемой странице. И, если поисковый робот не знал о данной странице, то он запомнит её при обходе.

Подобный инструмент есть у Google.
Полезная штука, но сложно использовать массово.

2. Ссылки с Twitter
Разместить твит на хорошем аккаунте со ссылкой на страницу сайта. Далее сделать максимальное количество репостов для данного поста. Простая старая схема, но иногда работает.

Имеет множество минусов:

- ссылка с хорошего аккаунта стоит дорого;
- сложно использовать в массовом порядке;
- даже, если много заплатить, не факт, что страница попадет в индекс.

3. Официальный twitter
Создайте аккаунт в Twitter и сделайте ссылку со всех страниц своего сайта на него. Так поисковая машина поймет, что данный аккаунт официальный для вашего сайта.

После добавляем посты на созданный аккаунт со ссылками на страницы сайта.  
Хороший и бесплатный способ, но при большом и частом использовании перестает работать навсегда.

4. Привлечение быстроробота
Использование сервисов, которые автоматически делают твиты, заметки в "Лайв джорнал" со ссылками на нужные страницы. Условия и цены у всех сервисов разные, но все можно изучить здесь.  

Можно добавлять огромное число страниц очень быстро, но это платный способ, и 100% гарантии никто не даст.

Указанные выше способы – основные, которые может применять любой оптимизатор или вебмастер. Существует огромное число способов в интернете о том, как загнать страницу в Индекс, но гарантии никто не предоставляет.

Наш совет – делайте понятную, удобную структуру сайтов, следите за обновлением страниц и добавлением их в файл sitemap.xml. Тогда не потребуется тратить бюджет на борьбу с плохой индексацией в различных сервисах.

Статьи по теме:
Инструменты для seo-специалиста
Что делать, если сайт просел в Яндекс
Проводим аудит сайта самостоятельно