Как увеличить индексацию. Как ускорить индексацию страниц поисковыми системами. Что нужно сделать

Всем привет. Задумались над скоростью индексации сайта. Вероятнее всего она вас не устраивает, раз вы забиваете в поиск данный запрос. После прочтения статьи вы получите ответ на вопрос . Почему говорим именно о Яндекс? Да потому, что в Google индексация проходит быстрее. День – два, а Яндекс обычно «тормозит» — проходит от 5 до 10 дней. Применив описанные ниже приёмы, индексация сайта в Яндексе будет проходить быстро.

Что такое индексация сайта

Индексация сайта – это процесс сканирования роботом поисковой системы страниц веб-сайта и внесение их в базу с последующими показами при запросе информации посетителем интернета. Страницы непроиндексированного сайта не окажутся в поисковой выдаче. Индексация — это главный элемент оптимизации сайта.

Для чего нужна индексация сайта

Индексация сайта в Яндексе и Гугле важна по нескольким причинам.

Страницы быстрее покажутся в результате поисковой выдачи, что приведет к увеличению трафика.
Защита контента от воровства. Недобросовестные веб-мастера могут скопировать и опубликовать текст на ресурсе, который индексируется быстрее, и авторство будет приписано ему. Соответственно, ваша статья в глазах робота будет выглядеть как плагиат, что может привести к штрафным санкциям.
При быстрой индексации легче продавать ссылки с сайта при помощи различных бирж. Это если решите монетизировать сайт таким способом.

Как ускорить индексацию сайта в Яндексе — внутренняя оптимизация

Думаю, понятно, что надо «помочь» поисковикам быстрее индексировать сайт. Помощь заключается как в работе над внутренними факторами, так и внешнее воздействие. Вот несколько способов, которые позволят ускорить индексацию сайта в поисковых системах.

Регистрация сайта в панели вебмастера Яндекс

Поисковая система предоставляет администратору ресурса инструменты для улучшения работы сайта: проводить анализ и исправление ошибок, отслеживать статистику, выполнять действия, направленные на ускорение индексации. Зарегистрируйте сайт в Яндекс.Вебмастер .

Создать файл robots.txt

Файл robots.txt указывает роботам правила индексации сайта, на какие страницы не стоит обращать внимание и не индексировать. Правильно созданный файл позволяет избежать появление дублированных страниц, различного «мусора». В то же время составленный с ошибкой файл robots txt может запретить индексацию сайта. После создания файла надо добавить его в Яндекс Вебмастер и выполнить анализ.

Создать карту сайта sitemap.xml

Sitemap создается исключительно для ботов поисковиков. Она не видна обычному посетителю. Сайтмап указывает страницы подлежащие индексированию и их значимость. При наличии карты сайты роботы выполнят индексацию страниц веб-ресурса быстрее. можно самостоятельно, или с помощью специальных сервисов. Файл также нужно внести в панель вебмастера.

Создать карту сайта HTML

Карту сайта в формате HTML создаётся для удобства пользователей. Преимущество её в том, что все страницы находятся на расстоянии трех кликов от главной страницы. В wordpress .

Добавить текст новой страницы в Оригинальные тексты Яндекс

Данный пункт не ускорит индексацию, но защитит контент от копирования. Минимальный объём текста который можно добавить в Оригинальные тексты составляет 300 слов.

Добавить новую страницу в аддурилку

После опубликования страницы в сети тут же добавляйте адрес в аддурилку . Так робот обязательно зайдет и просканирует добавленную страницу. Добавление сайта в add url является рекомендованным способом ускорения индексации самим Яндексом.

Частота обновления сайта

Трудно переоценить данный пункт. Он является одним из главным. Чем чаще обновляется контент на сайте, тем чаще боты будут заходить к вам «гости». Нужно приучить роботов регулярно посещать сайт. Желательно публиковать новые записи регулярно, по расписанию. Не все в один день, потом не публиковать две недели, а намного лучше каждый день без перерывов.

Когда я писал статьи через 4 — 7 дней, они индексировались Яндексом через 8 — 10 дней. Когда начал писать через день, индексация происходила через 4 дня.

Поэтому новостные сайты, публикующие посты десятками в день индексируются в течение нескольких минут. Роботы практически «живут» у них.

Качество контента

Еще один важный пункт зависящий только от вас. Надо писать уникальный контент, без грамматических ошибок. Статьи быть . Не следует заниматься переоптимизацией, то есть писать для людей, а не роботов, наборами ключевых фраз. Рекомендуемый объём статьи от 2000 символов, минимальная уникальность 85%. Для проверки есть специальные бесплатные сервисы. Я пользуюсь text.ru . Меня вполне устраивает. Для проверки семантического анализа использую Адвего .

Добавляйте изображения в статьи, и обязательно прописывайте alt.

Перелинковка страниц сайта

Перелинковка — это связь нескольких страниц ссылками. Правильно выполненная перелинковка позволяет заметно ускорить индексацию сайта в поисковых системах, и улучшит показатели сайта в поисковой выдаче. Один из приемов перелинковки — установить блок с последними записями в сайдбаре.

Как ускорить индексацию сайта в Яндексе — внешняя оптимизация

Здесь можно разделить способы ускорить индексацию в яндексе и гугле на платные и бесплатные.

Бесплатные способы ускорить индексацию сайта

RSS — трансляция. Анонс постов добавленный в специальные RSS — каталоги обязательно приведут поисковых роботов на ваш сайт.
Социальные закладки. Анонсы в закладках приведут не только роботов, но и целевой трафик, пусть и в небольшом количестве.

Дорогие читатели, сегодня мы поговорим об ускорении индексации сайта или блога.

Что такое индексация сайта? Это добавление ваших вновь написанных статей в индекс (базу) поисковых систем. Т.е. чем быстрее поисковый робот пришел на ваш сайт и скопировал к себе новые статьи, тем быстрее они проиндексируются и тем лучше! Сейчас я обо всем по порядку расскажу.

Почему важно ускорить индексацию сайта

Для ускорения индексации, конечно, наиболее важна XML карта сайта. Не забудьте указать ее адрес в вебмастере и файле robots.txt. Данный способ хорош тем, что нужно один раз сделать и забыть.

Настройте файл robots.txt

Используйте Аддурилки поисковых систем

Аддурилка (англ. Add URL – добавить адрес) – сервис, через который можно сообщить поисковой системе о выходе новой статьи. Это своего рода очередь на индексацию, в которую вы становитесь, написав новую статью.

Кроме того, добавив статью в аддурилку Яндекса вы получите ответ по результату индексирования. Или сервис сообщит вам об ошибке или невозможности индексации статьи. Так что данный сервис очень удобен для ускорения индексации сайта, конечно, если вам не лень каждый раз добавлять в него статьи.

Настройте пинг

Пинг – сигнал, который ваш сервер посылает поисковым системам при публикации статьи. Этот сигнал сообщает, что новую статью необходимо проиндексировать. Данный способ ускорения индексации сайта так же удобен тем, что не требует никаких действий, кроме разовой настройки.

Настраивается просто: зайдите в «Параметры» -> «Написание». В самом низу в «Сервисы обновления» впишите список пинг-северов. Полный список скопируйте из .

О том, как ускорить индексацию сайта яндексом и гуглом можно говорить бесконечно. Рассмотренные способы – самые удачные и полезные на мой взгляд.

Я советую вам использовать как можно больше из перечисленных способов для ускорения индексации сайта, и результат не заставит ждать. Но если вы знаете еще какие-то важные и действенные способы, непременно пишите в комментариях.

Всем быстрой индексации!

Вебмастера часто сталкиваются с проблемой, когда страницы неделями не попадают в индекс поисковой системы. Особенно актуальна она в Яндексе - новые страницы в нем появляются значительно позже, чем в Google. А в последнее время Яндекс еще и редко делает текстовые апдейты - 2-3 раза в месяц. В этой статье мы рассмотрим, что влияет на индексацию сайта, как ее можно ускорить и как следить за ней.

Что влияет на частоту индексирования сайта поисковым роботом

— Загруженность сервера, на котором находится сайт (качество хостинга)

Если на сервере находится много других ресурсов, а технические характеристики сервера не позволяют оперативно справляться со всеми запросами робота, робот начинает посещать такой сайт реже. Соответственно, ему потребуется больше времени для включения страниц в результаты поиска.

— Частота обновления сайта в целом

Поисковые роботы анализируют частоту обновления контента на сайте, в результате чего определяют, как часто будут посещать тот или иной сайт.
Чем чаще на сайт добавляется новый контент, тем чаще роботы ПС посещают его.

— Интерес посетителей к сайту (ПФ)

Поисковый робот может пересмотреть политику планирования и посещать сайт чаще, если на сайт регулярно добавляются новые материалы, интересные пользователям (например, новости, статьи):

пользователи задерживаются на сайте;
переходят по внутренним страницам;
добавляют сайт в закладки;
делятся материалом в соц. сетях и т.д.

Как улучшить индексацию сайта

Поисковый робот за один визит индексирует определенное количество страниц согласно выделенной квоте, которая зависит от множества параметров сайта. Т.е. даже если робот посетил ваш сайт, это еще не значит, что он проиндексирует и включит в свою базу все страницы сайта. Поэтому очень важно, чтобы робот-индексатор не только посетил ваш сайт, но и включил в свою базу все новые и измененные страницы сайта.

Ниже в статье мы рассмотрим, как заставить робота ПС чаще посещать ваш сайт и при этом увеличить количество страниц, которое за раз может проиндексировать робот ПС, - краулинговый бюджет .

1. Проанализируйте сайт на наличие дублей

Данный пункт поставили первым, так как дубли страниц - одна из основных проблем, которая ухудшает индексацию сайта поисковыми роботами.

Когда на сайте есть дубли, краулинговый бюджет тратится на бесполезные страницы вместо новых страниц или страниц с обновленным материалом.

О том, как найти на сайте дубли, подробно написано в статьях нашего блога:

2. Настройте сервер на выдачу правильного HTTP-статуса

Корректная настройка кодов статуса HTTP очень важна для правильной индексации сайта.

Когда робот ПС запрашивает страницу сайта, код статуса предоставляет ему информацию о сайте и конкретной странице:

существует страница или нет,
настроена ли переадресация,
нет ли на стороне сервера ошибки.

Например, код http «404 Not Found» сообщает, что страница по запрашиваемому адресу не существует, а код http «OK 200» сообщает, что страница доступна.

Заголовок Last-Modified информирует робота ПС о дате последнего изменения документа. Таким образом, робот-индексатор проверяет на обновление только документы, действительно изменившиеся со времени предыдущего обхода, или новые страницы, не тратя при этом краулинговый бюджет на страницы, которые не менялись.

Подробно о заголовке Last-Modified .

3. Мониторьте время отклика сервера и скорость загрузки страниц

Время ответа сервера на запрос браузера напрямую влияет на индексацию сайта.

С учетом сетевых задержек оно должно быть не более 300 мс.

Сервисы по измерению отклика сервера:

Увидеть, есть ли недочеты, можно с помощью сервиса Google PageSpeed .

4. Грамотно организуйте структуру сайта

Чем понятней для поискового робота выглядит структура сайта, тем он лучше будет его индексировать.

— Уровень вложенности страниц

Любая продвигаемая страница должна быть не дальше, чем в 3 кликах от главной. Это очень важно для индексации, так как поисковому роботу потребуется гораздо меньше времени на индексацию простого и неглубокого сайта, чем на сложный ресурс с запутанной системой навигации.

— Реализуйте на сайте хабовые страницы

Хабовые страницы - это страницы, которые содержат ссылки на разделы и подразделы, служащие для навигации пользователей по сайту.

Для того чтобы улучшить индексацию, хабовые страницы необходимо реализовать в один клик от главной страницы сайта.

Что нам даст реализация хабовых страниц:

А. Уменьшит уровень вложенности
Б. Ускорит индексацию страниц поисковым ботом
В. Поможет пользователям легче найти нужный материал

— Выводите анонсы на новые страницы на главную сайта

Поисковый робот чаще всего посещает главную страницу сайта. Если на ней будут размещены ссылки на новые страницы или страницы с обновленным контентом, есть большая вероятность, что робот их проиндексирует.

Например:

— Реализуйте виджет в сайдбаре последних статей

Еще один хороший способ связать между собой страницы сайта:

— Не делайте меню на скриптах и flash

Главным недостатком использования меню на скриптах и flash является то, что поисковые роботы его не видят.

5. Настройте файл robots.txt

Корректно составленный robots.txt позволит исключить возможные проблемы, возникающие при сканировании сайта роботом. Это может значительно ускорить индексацию ресурса в целом.

В файле robots.txt нужно прописать инструкции для роботов поисковых систем: какие страницы сайта индексировать, а какие - нет. В таком случае поисковикам потребуется меньше времени для сканирования сайта.

Например, в robots.txt можно закрыть:

служебные файлы и папки CMS;
внутренние и внешние дубли (если есть);
формы ответа на форуме;
технические страницы;
файлы, которые не несут пользу для пользователя (например, статистика посещений, страницы с результатами поиска).

Как создать правильный robots.txt?

1. Создайте файл robots.txt в текстовом редакторе.

3. Проверьте файл в сервисе Яндекс.Вебмастер — > Анализ robots.txt .

Скриншот из Яндекс.Вебмастера:

4. Если проверка прошла успешно и ошибок не обнаружено, загрузите файл в корень сайта.

Зарегистрируйте сайт в трастовых каталогах, справочниках и рейтингах (например, Яндекс.Каталог , DMOZ и Каталог Mail.ru);
Размещайте свои статьи на платной основе на сайтах такой же тематики;
Общайтесь на тематических форумах (о крауд-маркетинге подробнее );
Интегрируйте сайт с социальными сетями;
Создайте RSS-трансляцию на сайте;
Размещайте статьи в сервисах социальных новостей;
Работайте с социальными закладками.

7. Пишите качественный и уникальный контент

Качество контента также влияет на скорость индексации сайта. Плохой контент, который не дает полный ответ на запрос пользователя, в котором есть грамматические ошибки, большая плотность ключевых слов, индексируется хуже.

При написании текста важно учитывать, что:

Тексты должны содержать только наиболее важную информацию, полезную посетителям.
Материал должен давать полный ответ на запрос, после прочтения которого пользователь перестанет искать информацию на эту тему.
Акцентируйте внимание на важных нюансах, убирайте «воду» и рассуждения ни о чем.
Тексты должны быть грамотно структурированы (используйте заголовки, подзаголовки, делите текст на абзацы, делайте списки, когда они уместны, и т. д.)
Тексты должны содержать ключевые слова, но в умеренном количестве - избегайте переспама.
Желательно, чтобы уникальность текстов была не ниже 70%, согласно сервису https://advego.ru/plagiatus/ или https://www.etxt.ru/antiplagiat/ .

Как следить за индексацией сайта

Добавьте сайт в сервис Яндекс.Вебмастер и Google Search Console

Если сайт еще не добавлен в панели вебмастеров поисковых систем, настоятельно рекомендуем добавить. С их помощью вы сможете легко анализировать индексацию проекта. Например:

когда робот последний раз посещал ваш ресурс;
сколько страниц он загрузил в свою базу;
включена ли определенная страница в базу поиска;
какие ошибки обнаружил робот;
время загрузки страницы.

Также вы можете сообщить ПС о новых или удаленных страницах и мониторить другие параметры сайта, не связанные с индексацией. Например, внешние ссылки, ведущие на сайт, запросы, по которым пользователи переходят на сайт, и т.д.

Только полный анализ сможет помочь вовремя выявить и исправить ошибки индексации сайта.

Зарегистрировать сайт в вебмастере Яндекса и Google просто.

Для этого нужно выполнить процедуру в 3 шага, которые сопровождаются , в Я.Вебмастер:

Добавление сайта в Google Search Console также сопровождается инструкцией :

Как сообщить роботу ПС об изменениях на сайте

— Создайте карту сайта

Чтобы помочь поисковому роботу найти новые страницы на сайте, рекомендуем создать карту сайта в двух форматах: xml и html.

Карту в формате html нужно выложить на сайт в качестве отдельной страницы. При сканировании сайта робот попадает на данную страницу - она должна содержать ссылки на все страницы сайта, а это поможет ему найти их.

Карту в формате XML (Sitemaps) нужо добавить в панель инструментов для вебмастеров Google и Яндекса.

— Карта сайта должна автоматически генерироваться и обновляться при добавлении на сайт новых URL или удалении старых.

— В карту сайта не должны попадать закрытые от индексации страницы.

— После создания файла необходимо убедиться, что в нем нет ошибок. Сделать это можно при помощи специальных инструментов поисковых систем:

Также в карте XML (Sitemap) можно указать:

приоритет индексации - при помощи тега ;
частоту обновления конкретной страницы - при помощи тега .

После того как карта сайта будет создана, информацию о ней нужно добавить в панель инструментов для вебмастеров Google и Яндекса.

— Напишите скрипт «Ловец ботов»

Для крупного проекта можно применить следующую методику - в момент прихода робота ПС на сайт специальный скрипт показывает роботу ссылки на не проиндексированные страницы сайта.

Недостаток использования методики - сложная техническая реализация.

— Используйте « Add URL » поисковых систем

Это наиболее «традиционный» способ ускорения индексации новых страниц на сайте. С помощью « Add URL» поисковой системе можно сообщить как о новом сайте, так и о новой странице на сайте.

Чтобы сообщить о новой странице ПС Яндекс, используйте форму add url Яндекс :

Чтобы сообщить о новой ПС Google, используйте форму add url Google :

Недостаток использования этого инструмента - добавление страниц в данные формы не дает гарантий, что страница сразу же окажется в базе поисковой системы.

— Для быстрой индексации новых страниц в Google используйте инструмент «Посмотреть как Googlebot»

Воспользоваться данным инструментом можно после того, как сайт будет добавлен в Google Search Console (вебмастер).

Google Search Console — > Раздел Сканирование — > Посмотреть как Googlebot — > Вводим нужный URL — > Кнопка «Сканировать» — > Кнопка «Добавить в индекс», после чего появится надпись «URL отправлен на индексирование»:

Также с помощью данного инструмента можно узнать время загрузки страницы и данные по процессу сканирования.

Единственный недостаток - необходимо каждый раз при добавлении нового материала адрес вводить вручную.

— Плагин-пингер для ускорения индексации новых страниц в Яндекс

Повысить приоритет индексирования новых страниц сайта можно с помощью специальных POST-запросов. Подробнее .

Если ваш сайт построен на основе популярных CMS, например, WordPress, Joomla, Drupal - установите специальный плагин Пингер. Он автоматически будет сообщать Яндексу о появлении новых страниц на вашем сайте.

Что для этого необходимо сделать:

А. Установите :

Б. Установите и настройте плагин в соответствии с инструкцией :

После публикации новой страницы зайдите в настройки плагина, в окне «Сообщение о статусе плагина» должно появляться сообщение «Плагин работает корректно» и выводиться последний добавленный адрес.

Другие возможные статусы и их значения можно посмотреть .

— Специальные формы ПС для ускорения индексации блога «Пинг»

Если у вас блог с подпиской на RSS, для ускорения индексации новых страниц вы можете использовать специальную форму ПС «Пинг».

«Пинг» - это оповещение поисковых систем об изменениях на вашем сайте.

Для добавления новой записи в ПС Google нужно использовать форму « Blog Search» по адресу :

Для добавления новой записи в ПС Яндекс нужно использовать форму « Отправить пинг» по адресу :

Для ускорения индексации новых документов используйте бесплатные сервисы пингования, например, https://seo-ng.net/seo-instrumenty/ping_services.html :

Важно! Сервисы пингования используйте только при наличии свежего материала на сайте. Также не стоит один и тот же сайт пинговать в разных сервисах.

Подведем итоги - чтобы ускорить индексацию сайта в целом, необходимо:

1. Провести техническую оптимизацию сайта.

2. Организовать грамотную структуру сайта.

3. Регулярно добавлять новый качественный материал на сайт.

4. Добавляя новые страницы, нужно сообщать о них ПС.

5. Привлекать на сайт роботов ПС с помощью внешних ссылок.

Подписаться на рассылку

Всем хочется, чтобы опубликованные материалы мгновенно попадали в индекс и сразу же приводили посетителей. Особенно это актуально при продвижении в Яндексе, которому порой требуется несколько апдейтов для индексации новой страницы. А что если за это время истечет актуальность статьи? Получается, что вы зря потратили ресурсы на ее создание. Если вы хотите, чтобы статьи уже спустя пару часов после публикации были доступны в поиске, следуйте представленным ниже советам.

Почему не индексируется сайт?

Проблемы с индексацией сайта бывают трех типов:

страницы долго индексируются (зачастую причина - в низкой частоте обновления контента на сайте, и робот просто реже его посещает; также проблема может крыться в плохой SEO-оптимизации, некачественном контенте и сайте в целом);
страницы не индексируются ни Яндексом, ни Google (в этом случае нужно убедиться, что не установлен запрет на обход площадки роботами в robots.txt , настройках хостинга или в мета-тегах robots);
страницы не индексируются только одним поисковиком (стоит проверить сайт на фильтры поисковых систем).

Последние две проблемы устраняются или очень легко (если нужно просто разрешить индексацию страниц) или очень долго (если придется выводить сайт из-под санкций Яндекса или Google). В этой же статье рассмотрим именно способы ускорения индексации.

Способы ускорения индексирования сайта поисковиками

1. Улучшите внутреннюю SEO-оптимизацию

Сделайте внутреннюю перелинковку

В теле статей ставьте ссылки на другие страницы сайта. Также добавьте похожие записи (в конце статей) и популярные или новые записи (в сайдбаре). Не делайте более 3-4 уровней вложенности - страницы на 5 и 6 уровне индексируются хуже.

Хотите научиться расставлять внутренние ссылки так, чтобы улучшить поведенческие показатели и позиции в поиске? В статье «Как сделать перелинковку для успешного SEO и роста конверсий » описаны все самые эффективные подходы.

Пишите полезные и уникальные тексты

Если вы размещаете плагиат или поверхностный рерайт, то не удивляйтесь, что страницы не попадают в индекс. Поисковики считают такой контент дублирующимся и не несущим ценности для пользователей. О том, какими должны быть грамотно оптимизированные тексты для сайта, читайте .

Чаще публикуйте записи и обновляйте страницы

Поисковики любят «живые» сайты. Если несколько месяцев ничего не размещали, то робот перестает регулярно посещать сайт.

Как поддерживать актуальность сайта:

публикуйте новые записи не реже 1 раза в неделю;
добавляйте ссылки со старых страниц на новые материалы;
актуализируйте и обновляйте информацию на сайте;
настройте заголовки Last-Modified и If-Modified-Since (так поисковики будут обходить старые страницы только после внесенных на них изменений).

Устраните дубли на сайте

Дубли создают не только неудобства для вебмастеров, но и ухудшают качество сайта в глазах поисковиков. Они могут быть:

явными (URL со слешем в конце и без него, с WWW и без WWW, с HTTP и HTTPS, с GET-параметрами);
неявными (дубли страниц с комментариями, страницы товаров со схожими описаниями, страницы пагинации).

Устраняются они путем настройки 301 редиректа , указания канонических страниц , с помощью robots.txt. Все способы с примерами описаны в статье «Что такое дубли на сайте и как с ними бороться?» .

2. Используйте инструменты для вебмастеров

После запуска сайта обязательно зарегистрируйте его в панелях для вебмастеров: в Яндекс.Вебмастере и Google Search Console. Так вы сообщите поисковикам о появлении нового сайта, сможете отслеживать динамику индексации, будете получать уведомления об ошибках.

После создания новой страницы или обновления старой необходимо уведомить об этом поисковики, чтобы ускорить индексацию (переиндексацию). Делается это с помощью так называемых «аддурилок» (от англ. «add URL» - «добавить URL»).

В Яндексе этот инструмент находится в Вебмастере (раздел Индексирование / Переобход страниц). Введите новый URL и нажмите «Отправить».

«Аддурилка» Яндекса

До изменения в 2018 году интерфейса Search Console в Google был инструмент, который позволял добавлять любую страницу для переобхода. До сих пор в сети «висит» масса статей со ссылками на этот инструмент и описанием его работы, но он больше не поддерживается .

Старая «аддурилка» Google

Новые страницы в Google уже не нужно куда-то добавлять для индексации - достаточно того, чтобы они были в sitemap.xml. А вот старые страницы, на которых вы изменили контент, можно переиндексировать быстрее. Для этого перейдите в новый интерфейс Search Console в раздел «Проверка URL», введите адрес интересующей страницы и нажмите кнопку «Запросить индексирование». Это сигнал роботу обойти страницу вне очереди.

Данные действия - не гарантия попадания страницы в индекс или ускорения процесса (сами же поисковики ничего не обещают). Но поскольку такие инструменты есть, ими грех не воспользоваться.

Почему не индексируется сайт?

Проблемы с индексацией сайта бывают трех типов:

страницы долго индексируются (зачастую причина - в низкой частоте обновления контента на сайте, и робот просто реже его посещает; также проблема может крыться в плохой SEO-оптимизации, некачественном контенте и сайте в целом);
страницы не индексируются ни Яндексом, ни Google (в этом случае нужно убедиться, что не установлен запрет на обход площадки роботами в , настройках хостинга или в );
страницы не индексируются только одним поисковиком (стоит поисковых систем).