Добавить в индекс яндекса: Как быстро добавить страницу в индекс Яндекса и Google

Как быстро добавить страницу в индекс Яндекса и Google

#Оптимизация сайта #Индексация

#37

Апрель’17

19

Апрель’17

19

Новый ваш сайт или давно действующий в определенный момент вам понадобиться добавление страниц в поиск. Отдельная страница акции, новый товар или контент — он должен быть проиндексирован и быть видимым для поисковых системы. Мы расскажем как это сделать.

Чтобы быстро добавить страницу в поиск Яндекса, необходимо войти в сервис Яндекс.Вебмастер и воспользоваться инструментом «Переобход страниц».

Важно! Права на сайт должны быть заранее подтверждены.

Чтобы добавить страницу в индекс Google, надо войти в Search Console, выбрать необходимый сайт. Далее в разделе «Сканирование» выбрать «Просмотреть как Googlebot», добавить адрес новой страницы, выбрать «Сканировать» и далее кликнуть на «Запросить индексирование».

Для ускорения индексации страниц также рекомендуется:

• автоматическое добавление новой страницы в карту сайта sitemap.xml;
• наличие ссылок на новую страницу с популярных разделов вашего сайта или с внешних веб-ресурсов.

Похожее

Оптимизация сайта Индексация

Атрибут rel=canonical

Оптимизация сайта Индексация

Индексация ссылок

Оптимизация сайта Индексация

#133

Атрибут rel=canonical

Май’23

13071

23

Оптимизация сайта Индексация

#119

Индексация ссылок

Апрель’19

4941

30

Оптимизация сайта Индексация

#111

Описание и настройка директивы Clean-param

Апрель’19

10485

24

Оптимизация сайта Индексация

#104

Как привлечь быстроробота Яндекс

Февраль’19

2415

21

Оптимизация сайта Индексация

#94

Проверка индекса сайта. Как найти мусорные или недостающие страницы

Декабрь’18

10440

28

Оптимизация сайта Индексация

#86

Как закрыть ссылки и текст от поисковых систем

Ноябрь’18

6853

22

Оптимизация сайта Индексация

#82

Почему Яндекс удаляет страницы из поиска

Ноябрь’18

3533

19

Оптимизация сайта Индексация

#60

Правильная индексация страниц пагинации

Февраль’18

8957

19

Оптимизация сайта Индексация

#47

Как узнать дату индексации страницы

Ноябрь’17

8530

19

Оптимизация сайта Индексация

#46

Какие страницы надо закрывать от индексации

Ноябрь’17

11552

19

Оптимизация сайта Индексация

#38

Как удалить страницу из индекса Яндекса и Google

Ноябрь’17

15375

20

Оптимизация сайта Индексация

#7

Как закрыть сайт от индексации

Ноябрь’17

10966

18

Оптимизация сайта Индексация

#2

Как проверить индексацию сайта в поисковых системах

Ноябрь’17

18849

27

Оптимизация сайта Индексация

#1

Как ускорить индексацию сайта

Ноябрь’17

7361

29

Индексирование сайта — Вебмастер.

Справка

1. Добавьте сайт в Яндекс Вебмастер.

2. Sitemap. Для удобства вебмастеров и поисковых систем был разработан специальный формат карты сайта — sitemap. Это список ссылок на внутренние страницы сайта, представляемый в формате XML. Этот формат поддерживает и Яндекс. На специальной странице сервиса можно загрузить Sitemap для вашего сайта. Это позволит влиять на приоритет обхода роботом некоторых страниц вашего сайта. Например, если какие-то страницы обновляются гораздо чаще, чем другие, следует указать эту информацию, чтобы робот Яндекса правильно планировал свою работу.

3. Robots.txt — файл, предназначенный для роботов поисковых систем. В этом файле вебмастер может указать параметры индексирования своего сайта как для всех роботов сразу, так и для каждой поисковой системы по отдельности. Рассмотрим наиболее важные параметры, которые можно указать в этом файле:

   Disallow

   Эта директива используется для запрета от индексирования отдельных разделов сайта. С ее помощью необходимо закрывать от индексирования технические и не представляющие ценности ни для пользователя, ни для поисковых систем страницы. К ним относятся:

   Подробнее об этом см. в разделе Использование файла robots.txt.

   Clean param

   С помощью этой директивы можно указать роботу, какие cgi-параметры в адресе страницы следует считать незначащими. Иногда адреса страниц содержат идентификаторы сессий — формально страницы с разными идентификаторами различаются, однако их содержимое при этом одинаково. Если таких страниц на сайте много, индексирующий робот может начать индексировать такие страницы, вместо того чтобы скачивать полезное содержимое. Подробнее об этом см. в разделе Использование файла robots.txt.

4. Яндекс индексирует основные типы документов, распространенных в Сети. Но существуют ограничения, от которых зависит, как будет проиндексирован документ, и будет ли проиндексирован вообще:

   • Большое количество cgi-параметров в URL, большое количество повторяющихся вложенных директорий и слишком большая общая длина URL может привести к ухудшению индексирования документов.

   • Для индексирования важен размер документа — документы больше 10Мб не индексируются.

   • Индексирование flash:

     1. индексируются файлы *.swf, если на них есть прямая ссылка или они встроены в html тегами object или embed ;

     2. если flash содержит полезный контент, исходный html документ может быть найден по контенту, проиндексированному в swf файле.

   • В документах PDF индексируется только текстовое содержимое. Текст, представленный в виде картинок, не индексируется.

   • Яндекс корректно индексирует документы в формате Open Office XML и OpenDocument (в частности, документы Microsoft Office и Open Office). Но следует учитывать, что внедрение поддержки новых форматов может занимать некоторое время.

   • Допустимо использование тегов <frameset> и <frame>, робот Яндекса индексирует контент, подгружаемый в них, и позволяет найти исходный документ по содержимому фреймов.

5. Если вы переопределили поведение сервера для несуществующих URL, убедитесь, что сервер возвращает код ошибки 404. Получив код ответа 404, поисковая система удалит данный документ из индекса. Следите, чтобы все нужные страницы сайта отдавали код 200 OK.

6. Следите за корректностью HTTP-заголовков. В частности, важно содержание ответа, который сервер отдает на запрос «if-modified-since» . Заголовок Last-Modified должен отдавать корректную дату последнего изменения документа.

7. Версии сайта, адаптированные для просмотра на мобильных устройствах, лучше выносить на поддомен, так же, как и версии сайта на различных языках.

Примечание.

Запрещайте для индексирования не предназначенные для пользователей страницы, управляйте поисковым роботом Яндекса.

К следующему разделу

Если страницы доступны для робота, отправлены на переобход, но не появляются в поиске больше двух недель, заполните форму ниже:

Индексация — Вебмастер.

Справка

1. Добавить сайт в Яндекс.Вебмастер.

2. Карта сайта. Карта сайта — это специальный формат, разработанный для веб-мастеров и поисковых систем для описания структуры сайта. Представляет собой список ссылок на внутренние страницы сайта, представленный в формате XML. Яндекс также поддерживает этот формат. Вы можете загрузить карту сайта для своего сайта на специальной странице в Яндекс.Вебмастере. Используйте его, чтобы установить приоритет сканирования определенных страниц для робота. Например, если какие-то страницы обновляются чаще, сообщите об этом, чтобы робот правильно планировал сканирование.

3. Robots.txt — это файл для роботов поисковых систем. В этом файле вебмастер может указать параметры индексации для всех роботов или для каждой поисковой системы отдельно. Вот три наиболее важных параметра, указанные в этом файле:

   Disallow

   Эта директива используется для запрета индексации определенных разделов сайта. Используйте его, чтобы предотвратить индексацию технических страниц и страниц, которые не важны для пользователей и поисковых систем. В том числе:

   Дополнительные сведения см. в разделе Использование robots.txt.

   Очистить параметр

   Используйте эту директиву, чтобы указать роботу, какие параметры CGI в URL-адресе страницы не важны. Иногда URL-адреса страниц содержат идентификаторы сеансов. Формально страницы с разными ID разные, но содержание у них одинаковое. Если на сайте много таких страниц, робот может начать индексировать такие страницы, а не скачивать полезный контент. Дополнительные сведения см. в разделе Использование robots.txt.

4. Яндекс индексирует основные типы документов, распространяемых в сети. Но существуют ограничения, которые влияют на то, как документ индексируется и индексируется ли он вообще:

   • Большое количество параметров CGI в URL-адресе, большое количество вложенных каталогов и слишком длинные URL-адреса могут мешать индексированию документа.

   • Размер документа важен для индексации. Документы размером более 10 МБ не индексируются.

   • Indexing Flash:

     1. Робот индексирует файлы *.swf, если на них есть прямая ссылка или они встроены в HTML с тегами object или embed.

     2. Если Flash содержит полезное содержимое, исходный HTML-документ можно найти по содержимому, проиндексированному в swf-файле.

   • В документах PDF индексируется только текстовое содержимое. Текст, представленный в виде изображений, не индексируется.

   • Яндекс индексирует документы в форматах Open Office XML и OpenDocument (включая документы Microsoft Office и Open Office). Но поддержка новых форматов может занять некоторое время.

   • Вы можете использовать теги и. Робот Яндекса индексирует загруженный в них контент и находит исходный документ по содержимому фреймов.

5. Если вы задали другое поведение сервера для несуществующих URL-адресов, убедитесь, что сервер возвращает код ошибки 404. Как только поисковая система получает код 404, она удаляет документ из индекса. Убедитесь, что все необходимые страницы на сайте отвечают кодом 200 OK.

6. Убедитесь, что заголовки HTTP указаны правильно. Ответ сервера на запрос «if-modified-since» важен. Заголовок Last-Modified должен содержать правильную дату последнего изменения документа.

7. Размещать версии сайта, адаптированные для мобильных устройств, а также языковые версии в поддоменах.

Примечание.

Управлять роботом Яндекса и запрещать индексацию страниц, не предназначенных для пользователей.

Далее

Если страницы доступны для робота и отправлены на переиндексацию, но не появляются в поиске более двух недель, заполните форму ниже:

Как добавить сайт в поиск?

Üzgünüz, bu belge Türkçe diline henüz çevrilmedi.
Sayfada belgenin varsayılan dili gösterilmektedir:

İngilizce .

Страницы сайта появляются в результатах поиска после Яндекса Система, которая сканирует страницы сайта и загружает их в свою базу данных.

«}}»> посетите сайт. Чтобы робот сканировал и загружал страницы:

Шаг 1. Сделать страницы сайта видимыми для робота

Сообщить роботу Яндекса об изменениях на сайте можно несколькими способами:

9 0118

Метод	Автоматизация	Рекомендации
Файл Sitemap		Создайте и обновите файл. Это позволит вам отправлять информацию обо всех URL-адресах сайта. Робот может обработать содержимое файла при следующем обходе сайта.
Сканирование страниц с тегом Яндекс. Метрики		Установите тег Яндекс.Метрики на свой сайт и привяжите его к сайту в Яндекс.Вебмастере. Таким образом вы можете сообщить нам о популярных страницах.
Переиндексация страниц	—	На странице Индексация → Переиндексация страниц в Яндекс.Вебмастере вы можете подать сигнал роботу на посещение определенных страниц сайта. Вы можете использовать этот метод, чтобы сообщить об изменениях на самых важных или новых страницах.
Протокол IndexNow		Помогает автоматически сообщать об обновленных, новых и удаленных страницах. Требуются навыки работы с API.

Наконечник. Поддерживайте качество сайта. Чем больше полезных страниц будет найдено и загружено в базу роботом, тем больше вероятность того, что они будут отображаться в результатах поиска.

Подробнее читайте в разделе Признаки некачественного сайта.

Шаг 2. Скрытие закрытого контента

Тип страницы	Что мне делать?
Страницы действий. Например, добавление товара в корзину или сравнение товаров.	Запрет индексации страницы
Корзина с товаром.
Личная информация. Например, адрес доставки и номер телефона клиента.	Ограничить доступ к данным путем аутентификации пользователей на сайте
Страница сайта, которая дублирует содержимое другой страницы того же сайта, но имеет другой URL.»}}»>. Например, URL с дополнительными параметрами (https://example.com/page?id=1).	Укажите, какая страница предпочтительнее для включения в результаты поиска

После обхода сайта роботом страницы могут появляться в поиске в течение двух недель.