Сайт в выдаче яндекса: Как добавить сайт в поиск

как обновления сказались на российском SEO. Читайте на Cossa.ru

Глобальные изменения в Google

Сергей Сухоплюев Руководитель юнита «Трафик» маркетинговой группы Completo

Самое яркое изменение, которое произошло в Google за последнее время — отключение Google Ads. В поисковой выдаче пропала реклама — она полностью отдана под SEO. Логично предположить, что после того, как исчезают рекламные ссылки, весь трафик переходит на сайты по органической выдаче.

Если посмотреть срезы по одному из наших проектов в Google Search Console (GSC) за май 2021 и 2022 годов, заметно, что CTR увеличился на 0,7%.

В мае 2021 года CTR этого проекта составлял 2,57%

Через год, в мае 2022, CTR проекта показывал уже 3,2%

Количество показов осталось примерно таким же: аудитория Google не сильно уменьшилась, ведь для пользователя, наоборот, хорошо, что в выдаче нет рекламы. При этом CTR — количество кликов на 1000 показов — выросло. Пользователи стали чаще кликать не на объявления, а на поисковую выдачу. Средняя позиция по рассматриваемому проекту — в районе 25, то есть достаточно много запросов уже находится в топ-10 или даже в топ-3.

Есть ещё один пример проекта, где средняя позиция чуть хуже — 40, но у него тоже наблюдается динамика увеличения СTR, правда, не такая яркая.

Количество кликов растёт, при этом количество показов в данном случае падает

Можно сделать вывод, что после того, как Google Ads пропал с рынка РФ, количество трафика и СTR выросли не у всех проектов, а у тех, которые и так имели достаточно много запросов в топ-3 и топ-10.

Сайтам, у которых нет запросов в топе, следует развивать ресурс. Нужно добиваться того, чтобы они лучше ранжировались и получать более высокий отклик и СTR, нежели это было, например, год назад.

Но есть тематики, где произошёл не такой сильный рост — это зависит от того, насколько коммерческой была ниша. Если в нише вообще не было рекламы, то изменения на неё особо и не повлияли.

Также Google устраняет теги в Sitemap. Ранее было два вида Sitemap: для изображений и для видео. Теперь компания анонсировала, что избавляется от атрибутов — таких как title или price для видео. Упрощается формирование самого файла, но тем, кто использует в нём теги, следует быть внимательными. Также Google убирает инструмент «Параметры URL» из Search Console. Считается, что эта технология устарела и не нужна поисковой системе.

17 июня 2022 года вышла новость, что российское подразделение Google подало заявление на банкротство. Сейчас поисковик приносит примерно половину трафика в российском сегменте интернета в зависимости от ниши. Если для части пользователей из России не будет доступен Google, скорее всего, трафик будет перетекать в Яндекс или на платные каналы.

Эффект Google May 2022 Core Update

Александр Шестаков Руководитель направления ссылочных продуктов Links. Sape

25 мая 2022 года Google сообщил об обновлении основных поисковых алгоритмов, нацеленном на их улучшение и оттачивание. Последствия апдейта сразу сказались на результативности продвижения сайтов.

Значимое влияние майского апдейта 2022 на поисковую выдачу (по версии RankRanger)

Нужно отметить, что в отличие от Яндекс у Google есть подробные инструкции для вебмастеров: что конкретно нужно делать с сайтом и как его оптимизировать, чтобы «угодить» поисковым алгоритмам.

• Первый блок — общие рекомендации: индексация, дальнейшая оптимизация, анализ сайта, техническая оптимизация, контент и UX. Рассказывается, как правильно сделать сайт удобным для пользователя и обеспечить качество. Этот блок содержит общие рекомендации.

• Второй блок более конкретен. В нём объясняется, как именно оптимизировать сайт под Google. При этом нужно помнить, что оптимизация в этом поисковике отличается от оптимизации в Яндексе и SEO-специалисту нужно будет подстраиваться под другие требования.

Реакция сообщества на майское обновление была неоднозначной. Примерно 30% пользователей остались недовольны, такая же часть пишет позитивные отзывы, а оставшиеся 40% просто поблагодарили за обновление и смотрят в будущее с оптимизмом. Было озвучено интересное мнение, что ресурсы с плохой репутацией в плане контента и ссылок — те, кто работают по не самым легальным схемам — не попали под удар и, в общем, выросли. А те, кто старались работать по гайдлайнам Google, упали.

Пока сложно сделать однозначный вывод. Складывается ощущение, что обновление алгоритмов обесценивает рекомендации Google в том виде, в котором они представлены. Отдельно хочется отметить комментарий пользователя Эндрю Чарльтона: пользователи говорят, что Google поступил плохо, но никто не предлагает проверить, что можно теперь улучшить.

То есть такая реакция на рынке тоже имеет место быть.

Интересно также узнать мнение экспертов с известных ресурсов Search Engine Land и Search Engine Journal. На первом Барри Шварц, заметный эксперт на западном рынке SEO, выпустил статью, где говорится о ситуации в крупных нишах. Из статьи следует, что, действительно, после майского обновления пользователей «штормило». В ней есть разбор по нишам, где произошёл наибольший шторм, но в целом картина достаточно ровная и показывает изменения на доли процентов. Не чувствуется, что произошло что-то глобальное.

Во второй статье специалист Мэтт Г. Саутерн описывает двойственную ситуацию, при которой SEO-специалисты, использовавшие ИИ при написании текстов, отметили падение, а другие специалисты, наоборот, увидели рост. При этом отмечается, что следование рекомендациям не гарантирует успеха — алгоритмом правит машина, а не человек. И, видимо, есть некий фактор погрешности машинных нейросетей, которые выдают такой результат.

Выводы достаточно простые: исторически поисковые системы развивались от простых алгоритмов на основе документов и текстов к более сложным. Дальше появилось машинное обучение. Но сейчас всё, что происходит — это просто донастройка, тюнинг тех алгоритмов, которые уже есть в нейросети. Скорее всего, они не будут кардинально меняться. Мы наблюдаем это с двухтысячных годов и, вероятно, дальше будет продолжаться так же.

Поэтому паниковать не сто́ит — если вы видите апдейт Google, то помните следующее.

1. Поисковики стремятся сделать качественную выдачу, создают инфоповоды, чтобы обратить на себя внимание. На самом деле им это не очень выгодно. Если поиск будет качественнее, чем контекстная реклама, то все будут кликать на поиск, а не на рекламу, и Google потеряет доход. Можно сказать, что поисковые сервисы зажаты в рамках своих возможностей. Поэтому происходит так: выходит алгоритм, при котором те, кто следуют рекомендациям, проседают в выдаче.

2. В будущем ещё будет много подобных апдейтов, и к ним сто́ит относится как к природным явлениям. Никто не может предугадать, коснётся его обновление или нет. Остаётся надеяться, что удача будет на вашей стороне. Тюнинги алгоритмов приводят к тому, что «белые и пушистые» сайты тоже могут пострадать. И к этому надо быть готовым морально. Может быть, подстраиваться под то, что происходит. Придётся смириться с тем, что алгоритмы работают именно так, а не иначе, и тем, кто просел, будет сложно выбиться наверх. Им остаётся ориентироваться на конкурентов и продолжать оптимизировать свой сайт.

Глобальные изменения в Яндексе

Сергей Сухоплюев Руководитель юнита «Трафик» маркетинговой группы Completo

В Яндексе тоже есть ряд изменений и нововведений. Ранее была опубликована новость, что ФАС и Яндекс заключили перемирие: они боролись за поисковую выдачу, поскольку Яндекс, по сути, монополизировал «Расширенные ответы». Сейчас для вебмастеров и владельцев сайтов, которые продвигаются с помощью SEO, открылось больше возможностей. Появились новые инструменты для того, чтобы прямо в поисковой выдаче показывать релевантные ответы.

В качестве примера можно привести использование этого приёма в интернет-магазине. Вы выбираете список рекомендованных товаров. Когда пользователь вводит запрос, в верхней части выдачи появляется стандартное предложение от Яндекс. Маркет — блок, который называется «Рекомендованные товары».

Пример блока «Рекомендованные товары» в выдаче Яндекса

Есть ряд условий для того, чтобы попасть в эту выборку. На сайте должно быть:

• не менее 3 товаров;
• не менее 3 предложений;
• хотя бы одно предложение, имеющее отношение к магазину или маркетплейсу, который входит в топ сайтов.

При этом Яндекс прямо не описывает, что подразумевается под топовыми сайтами, но это чаще всего крупный портал, который имеет популярность и трафик. Соответственно, для интернет-магазинов открываются новые возможности. Всем остальным, в любом случае, сто́ит обратить внимание на список расширенных сниппетов, чтобы увеличить количество показов и переходов на сайт.

После того, как пользователь нажимает на этот блок, у него открывается следующая карточка, где, собственно, может быть представлен один из ваших ресурсов. Технология достаточно сомнительная, но позволяет обычным сайтам попадать в топ по крупным запросам, например, по высокочастотным коммерческим.

Пример раскрытия карточки товара

Также Яндекс снова обращает внимание на важность протокола HTTP/2. Это достаточно старая технология. Она ускоряет сайт, а это один из факторов SEO-ранжирования. Хотя на официальном сайте Яндекса говорится, что данная технология не влияет на него напрямую, тем не менее, она улучшает пользовательский опыт — посетитель быстрее получает доступ к информации и, соответственно, проводит на сайте больше времени.

Если же при переходе на HTTP/2 ничего не изменилось, возможно, сайт и так был оптимизирован. Проверьте, использует ли ваш сервер эту технологию. Поскольку Яндекс упоминает об HTTP/2, значит протокол актуален и его следует опробовать.

Обновления Яндекс Вебмастер

Яндекс Вебмастер тоже представил несколько обновлений в этом году, часть находится в стадии бета-тестирования.

Во-первых, речь идёт о рендеринге страницы JavaScript. Есть ряд сайтов или страниц, которые написаны на технологии JavaScript. В Google они индексируются, причём достаточно давно, а Яндекс такие страницы не индексировал. Ранее он заявлял о том, что есть такая технология, как индексация через esc-фрагмент. И теперь вводит её в качестве эксперимента. Технология позволяет:

• полностью запретить индексацию сайта на JavaScript;
• оставить на усмотрение робота;
• дать рекомендацию, чтобы Яндекс проиндексировал этот сайт.

По сути получается аналог плагина robots.txt, только для JavaScript сайтов.

Во-вторых, Яндекс Вебмастер внедрил инструмент по проверке SSL-сертификата. Теперь можно проверить сайт на наличие сертификата, выданного национальным удостоверяющим центром. В сервисе можно проверить, насколько корректно установлен сертификат, правильно ли выдан и на кого именно.

Достаточно ввести URL нужного сайта, чтобы получить информацию о наличии SSL-сертификата

В связи с тем, что многие вебмастера столкнулись с невозможностью получить или обновить сертификат, в России открыли центр на базе Госуслуг. Любое юридическое лицо может перейти на портал Госуслуг и бесплатно получить SSL-сертификат.

Также на сайте Госуслуг можно скачать список сайтов, которые уже воспользовались именно российским сертификатом. На данный момент в базе порядка 4000 сайтов. Если вы столкнулись с тем, что ваш сертификат просрочен или на исходе, а хостер его не обновляет, этот вариант — одна из работающих альтернатив.

Ещё один новый инструмент от Яндекс Вебмастер — проверка страниц. В разделе «Инструменты» — «Проверка страницы» можно выбрать адрес сайта или страницы и сервис покажет, как робот видит его в мобильной версии, а как — в десктопной. Также будет указана дата последней индексации. По сути, это удобный инструмент, который позволяет в одном окне увидеть все данные о странице.

Последние изменения в работе поисковиков дали российскому SEO целый ряд новых возможностей эффективно продвигать сайты, используя ситуацию на рынке, новые инструменты и уже проверенные методики.

Что ещё почитать о ренессансе SEO

• Как SEO помогло в пять раз увеличить трафик и в три раза число заказов
• Чеклист по SEO-продвижению в Google 2022
• Чем заменить и как вернуть заблокированные SEO-инструменты
• Линкбилдинг как универсальное решение для SEO сегодня: мнение специалиста
• Как изменилось SEO в новой реальности: мнение экспертов
• 40+ инструментов SEO-специалиста. Личный топ Рамазана Миндубаева, TRINET.Group

Прямая линия Коссы: задайте вопрос автору или поделитесь своим SEO-опытом

Мы постараемся, чтобы автор вам ответил. А если обсуждение покажется нам полезным, добавим его в статью (или выпустим новую), чтобы все читатели получили максимум пользы.

Продолжить в телеграме → @hellocossabot

Различие Seo-продвижения для Яндекс и Google

Различие Seo-продвижения для Яндекс и Google

Алгоритмы работы наиболее популярных поисковых систем (ПС) Рунета – Google и Яндекса всегда вызывали большой интерес у владельцев коммерческих ресурсов и оптимизаторов, которые неустанно изучают подходы и методы обработки данных указанными машинами для того, чтобы осуществить качественное продвижение собственных сайтов. В этой статье попробуем разобраться в сходствах и отличиях поискового ранжирования этих двух поисковых гигантов.

На самом деле различия продвижения под Гугл и Яндекс достаточно существенны. Со временем они накапливаются, а в последние несколько лет стали всё более ощутимыми.

Частота обновлений

Одним из ключевых понятий в работе ПС является так называемая частота апдейтов – обновлений поисковой выдачи. По оперативности внесения изменения лидирует Google, здесь все происходит в режиме реального времени. За счет внедрения алгоритма «Caffeine» все обновления происходят динамически.

Система Яндекс обновляет свои выдачи статически после прохождения апдейтов. Последние делятся на множество типов, но самое весомое влияние на ранжирование среди них оказывают:

• текстовые апдейты;
• ссылочные апдейты;
• апдейты поведенческих факторов.

Таким образом, в Яндексе при обновлениях происходит значительно большее количество перемен по сравнению с Google. Правда, в американской системе изменения выдачи проходят менее заметно и за больший временной период. Отслеживать изменения поисковых выдач Яндекса можно посредством ресурса tools. promosite.ru, а Google для данных целей предусмотрел сервис algoroo.com. Кроме того, многие оптимизаторы дополнительно пользуются еще такими инструментами-анализаторами, как Seobudget и SeoLib.

Региональность

Ссылочная масса в Google практически не имеет региональности, поэтому на нее, по сути, не обращают внимания. Продвижение сайта в Яндекс обязательно учитывает данную особенность. В данной ПС запросы являются геозависимыми, поэтому здесь значительно проще вывести сайт на первые позиции по определенному региону, но при этом задача усложняется в несколько раз, когда требуется добиться того же результата, скажем по всей России.

Уникальность контента

Прежде всего, Яндекс очень хорошо понимает русский язык, поэтому, что касается распознавания русскоязычных слов и текстов эта поисковая машина точно превосходит всех своих конкурентов. Для ранжирования выдачи по уникальности контента у каждого поисковика есть свой сервис, у Google – Panda, у Яндекс – АГС. Оба этих алгоритма борются с текстовым спамом. Причем чтобы пострадать от Панды нужно разместить на сайте большое количество неуникальных текстов, в то время как АГС понижает в выдаче немало ресурсов, содержащих контент, полученный путем рерайта, не говоря уже о копипасте. Более того, Яндекс легко вычисляет неуникальные изображения.

Сбор трафика по НЧ

В ПС Яндекс наличие уникального контента сразу приводит к предоставлению сайту достаточного трафика по НЧ, даже без дополнительных средств продвижения. В Гугле получить хороший трафик по НЧ без ссылок очень сложно. Даже страницы с качественным контентом система, скорее всего, сразу же отправит в дополнительный индекс и переходов на них практически не даст. Для эффективного сбора трафика обязательным условием является наращение ссылочной массы. Что касается полезности и обновляемости информации на сайте, то Google здесь не слишком разборчив, поэтому сайты с бредовым содержанием или давно заброшенные ресурсы индексирует на ура.

Cсылочное продвижение

На самом деле продвижение сайта в Google сопряжено с меньшим количеством трудностей, чем в Яндексе, под который оптимизировать нужно более осторожно. К примеру, в Гугле хорошо работает закупка ссылок, имеющих одинаковые анкоры. В Яндексе подобные действия сразу же приведут к попаданию сайта под действие фильтра. Тут необходимо подбирать качественные ссылки, а наращение их массы должно осуществляться планомерно, тщательно разбавляя анкор-лист.

Время продвижения

Сроки, за которые можно продвинуть сайт также разнятся в рассматриваемых ПС. Например, Google отличается быстрой реакцией на действии оптимизаторов. Нередко результаты их работы видны не то что через несколько недель, порой для этого достаточно пару дней.

В отечественной поисковой системе ссылки начинают работать не сразу и промежутки между апдейтами больше, поэтому добиться желаемого результата в короткие сроки не получится. Также здесь сказывается влияние возраста сайта на результаты выдачи. Дело в том, что Яндекс в отличие от Гугла плохо ранжирует молодые сайты, в частности по конкурентным тематикам. Вероятнее всего, эффект от продвижения в Яндексе будет заметен только спустя несколько месяцев.

Это только краткий перечень отличий seo-продвижения в поисковых системах Google и Yandex, которые позволяют повысить посещаемость сайта и увеличить конверсию. Данный список можно продолжать еще долго, но уже по вышеперечисленным критериям видно, что эти различия существенные, а иногда принципы продвижения вступают в противоречия между собой, так что порой приходится жертвовать позициями в одной системе, ради успеха в другой.

Поделиться

Настройка отображения сайта в результатах поиска

Сниппет — это блок информации о веб-странице, отображаемой в результатах поиска. Фрагмент включает заголовок и описание страницы, а также может содержать дополнительную информацию о сайте.

Фрагменты создаются автоматически. В некоторых случаях они могут содержать дополнительную информацию. Это делает сниппет более информативным и предоставляет дополнительную информацию о сайте и компании. Узнайте больше о создании и отображении фрагментов.

Далее

Сообщите нам, о чем ваш вопрос, чтобы мы могли направить вас к нужному специалисту:

URL-адрес письма caseАдресный фрагментСсылки SERPFaviconПартнерские программы и разметкаНазвание и описание сайтаХлебные крошкиСсылки на сайт в поисковых подсказкахИсправление запроса, содержащего URL сайта

Узнайте об изменении регистра букв URL, на что это может повлиять, каковы требования к изменениям и каковы условия обновления информации в разделе «Регистр букв URL».

Если остались вопросы, выберите тему:

Запрос принят, но в результатах поиска нет изменений. Запрос отклонен по ошибкеЕще вопрос по регистру букв URL

Изменения отображаются в результатах поиска в течение двух недель после отправки запроса. Если регистр букв URL не изменится в результатах поиска в течение 2 недель, сообщите нам об этом:

Подробнее о сниппете адреса и других способах отображения бизнес-информации в сервисах Яндекса читайте в разделе Информация об организации.

Если неправильный адрес является частью описания страницы (не адресным сниппетом), выберите из списка вариант «Название и описание сайта», максимально подробно опишите ситуацию и предоставьте скриншоты.

Уточните свой вопрос по сниппету адреса:

Вопрос по метке «Адреса на карте». Для сайта не отображается сниппет адресаКак изменить номер телефона или адрес в сниппете?Другие вопросы по адресу фрагмент

Ярлык «Адреса на карте» отображается, если у организации два и более адреса в одном регионе. При нажатии на метку вы можете увидеть адреса организации на Яндекс.Картах. В этом случае сниппет не отображает адрес и номер телефона.

Если у вашей организации один адрес, но в сниппете отображается надпись «Адреса на карте», проверьте информацию в Яндекс.Бизнесе. Чтобы задать вопрос о редактировании информации в Яндекс.Бизнес, воспользуйтесь этой формой.

Фрагмент адреса отображается, если сайт находится в Топ-30 результатов поиска Яндекса. Используются реквизиты организации, опубликованные в Яндекс.Бизнесе:

• Указана главная страница сайта (например, http://example.com).

• Адрес сайта такой же, как в Яндекс.Вебмастере: с префиксом www или без него и с протоколом HTTP или HTTPS.

• Контактная информация организации (город, улица, номер дома) указана полностью.

Требования соблюдены, но сниппет адреса не отображается

Чтобы изменить контактную информацию в сниппете адреса, отредактируйте карточку организации в Яндекс. Картах:

1. Найти организацию в Яндекс.Картах .Maps и щелкните ссылку Изменить.

2. В открывшейся форме введите верные данные об организации.

Данные адресного сниппета обычно обновляются в течение недели после смены карточки организации.

Если у вас есть вопрос по редактированию карточки организации в Яндекс.Бизнесе, воспользуйтесь этой формой.

Рекомендуем прочитать о формировании быстрых ссылок и управлении ими в сервисе Яндекс.Вебмастер.

Если у вас все еще есть вопросы о дополнительных ссылках, заполните форму ниже:

Чтобы узнать больше о фавиконе, см.:

• Рекомендации по формату и размеру фавикона
• Как установить фавикон?
• Как отредактировать или удалить значок?

Если у вас остались вопросы, выберите тему:

Фавикон моего сайта не отображается Фавикон сайта исчез В результатах поиска отображается неправильный или устаревший фавикон Общий вопрос об индексации фавикона

Если вы следовали всем рекомендациям по размещению фавикона , он должен быть проиндексирован и появиться в результатах поиска примерно через две недели.

Прошло больше двух недель, а фавикон так и не появился

Фавикон мог исчезнуть из поиска, если он не был добавлен в базу при последнем обновлении. Это возможно, если фавикон, сайт или хост были недоступны во время индексации специальным роботом.

Также убедитесь, что фавикон размещен правильно. Если он указан правильно, дождитесь очередного обновления базы фавикон, что занимает около двух недель.

Прошло более двух недель, а фавикон так и не появился

Это может произойти, если:

• Разные фавиконки сайтов размещены по разным адресам. Если к сайту можно получить доступ по URL-адресам с префиксом «www» или без него, а также по протоколам HTTPS и HTTP, убедитесь, что значок значка везде одинаков или что он является правильным для индексации для каждого из сайтов.

• Сайт временно недоступен. В этом случае робот может загрузить фавиконку хостинга со страницы сайта в парке.

Если эти причины устранены и вы следовали рекомендациям по размещению фавикона, изменения появятся в результатах поиска в течение двух недель после их сканирования роботом.

Рекомендации не помогли и прошло более двух недель

Яндекс поддерживает только примеры партнерских программ, указанные в разделе Какие данные можно отправлять? раздел и разметка, представленная в разделе Семантическая разметка (Schema.org, Open Graph, JSON-LD и микроформаты).

Как часто формируется наценка?Партнерская программа «Рецепты»Наценка на хлебные крошкиСовмещение микронаценки товаров и партнерской программы «Товары и цены»Не нашлось подходящей наценкиОшибка в валидаторе структурированных данныхДругие вопросы по партнерской программе или наценке

Наценка есть создается в течение двух недель. Если Яндекс не поддерживает какой-либо из типов разметки на странице или разметка неверная, он ее пропускает.

Фрагменты рецептов генерируются только для сайтов, связанных с едой и кулинарией.

Поскольку Яндекс не поддерживает разметку хлебных крошек, в валидаторе могут возникать ошибки. Эти ошибки не влияют на проверку разметки.

Следует различать микронаценки на товары и программу «Товары и цены». Если сайт подключен к программе «Товары и цены» и имеет микроразметку, приоритет отдается сниппетам программы.

Робот Яндекса сможет индексировать информацию сайта даже без разметки, и это не повлияет на отображение страниц в результатах поиска. Чтобы задать нужное описание страницы в результатах поиска, используйте метатег Description.

Подробное описание ошибок см. в разделе Средство проверки структурированных данных.

Ошибка не может быть устранена

Данная форма обратной связи предназначена для вопросов о партнерских программах Яндекса и наценке. Если вы сомневаетесь, стоит ли вам использовать ту или иную партнерскую программу других сервисов (не Яндекса), мы не можем комментировать, как она влияет на статус вашего сайта в поиске.

Подробнее о создании и изменении названия и описания сайта см. в разделе Фрагмент.

Рекомендации не помогли

Уточните свой вопрос:

Главная страница не имеет описания или названия в результатах поиска, либо показывается метка «Найден по ссылке».Другие вопросы по сайту название и описание

Прочтите о панировочных сухарях и о том, как они формируются.

Рекомендации не помогли

Рекомендации не помогли

Про автоматическую коррекцию поисковых запросов можно прочитать в справке по поиску.

Как исключить страницы из поиска?

Иногда требуется исключить страницу сайта из результатов поиска, например, если она содержит конфиденциальную информацию, является дубликатом другой страницы или была удалена с сайта.

1. Шаг 1. Запретить индексацию страницы или каталога
2. Шаг 2. Ускорить удаление страницы
3. Как вернуть страницу в результаты поиска?
4. Часто задаваемые вопросы

Есть несколько способов сделать это:

Если страница удалена с сайта

• Добавьте директиву Disallow в файл robots.txt.

• Настройте сервер таким образом, чтобы при доступе робота к URL-адресу страницы он отправлял статус HTTP с кодом 404 Not Found, 403 Forbidden или 410 Gone. Для удобства пользователей рекомендуем настроить редирект с кодом HTTP 301.

Если страница не должна отображаться в поиске

• Добавьте директиву Disallow в файл robots.txt.

• Укажите метатег robots с директивой noindex.

Чтобы проверить правильность инструкций в файле robots.txt, используйте инструмент анализа Robots.txt.

Примечание. При сканировании сайта робот сначала обращается к файлу robots.txt, если он есть, а затем сканирует страницы сайта. Постраничное сканирование может занять некоторое время. Если вы хотите удалить много страниц из поиска, добавьте директиву Disallow для нужных страниц.

202202202.ITION. 24 часа.

Поведение робота при исключении страницы с различными методами

Exclusion Method	Поведение Robot
Статус HTTP с кодом 404, 403 или 410	Робот продолжает посещать страницу некоторое время, чтобы убедиться, что ее статус не меняется. Если страница остается недоступной, робот перестает ее сканировать.
Метатег robots с директивой noindex

Когда робот заходит на сайт и обнаруживает, что ему запрещено индексирование, страница пропадает из результатов поиска в течение недели. URL удаленной страницы отображается в списке исключенных страниц на странице Индексирование → Страницы в поиске в Яндекс.Вебмастере.

Исключение из поиска страниц, нарушающих авторские права, не является приоритетной задачей робота. Чтобы исключить страницу из поиска, воспользуйтесь способами, описанными в этом разделе.

Страницы, исключенные из результатов поиска, могут отображаться в Яндекс.Вебмастере до следующего сканирования сайта.

Чтобы ускорить удаление страницы из поиска, скажите Яндексу удалить ее, не дожидаясь запланированного обхода роботом.

• Если ваш сайт не добавлен или не проверен в Яндекс.Вебмастере:

  1. Перейдите на страницу Удалить страницы из результатов поиска в Яндекс.Вебмастере.

  2. Введите URL-адрес исключаемой страницы в поле, например http://example.com/page.html.

  3. Нажмите кнопку «Удалить».

  Чтобы исключить из поиска несколько страниц, удаляйте их по одной.

• Если ваш сайт добавлен в Яндекс.Вебмастер и вы подтвердили права на управление сайтом:

  1. Перейдите в Инструменты → Удалить страницы из результатов поиска.

  2. Установите переключатель в положение По URL.

  3. Введите URL страницы в поле, например http://example.com/page.html.

  4. Нажмите кнопку «Удалить».

  Вы можете указать до 500 URL-адресов на сайт в день.

Вы можете удалить все страницы сайта, отдельные каталоги или страницы с указанными параметрами в URL, если ваш сайт добавлен в Яндекс.Вебмастер и вы подтвердили права на управление сайтом.

1. В Яндекс.Вебмастере перейдите в Инструменты → Удалить страницы из результатов поиска.

2. Установите переключатель в положение По префиксу.

3. Specify the prefix:

   What to delete	Example
   Site directory	http://example. com/catalogue /
   Все страницы сайта	http://example.com /
   URL с параметрами	http://example.com/page ?

   Вы можете отправлять до 20 префиксов на сайт в день.

4. Нажмите кнопку «Удалить».

Примечание. Робот удалит указанные в Яндекс.Вебмастере страницы только в том случае, если эти страницы указаны в директиве Disallow в файле robots.txt.

После отправки URL в Яндекс.Вебмастер вы можете отслеживать изменение статуса в Инструменты → Удалить страницы из результатов поиска:

90

Статус	Описание
«В очереди на удаление»	Робот проверяет ответ сервера и запрещена ли страница к индексации. Проверка может занять несколько минут.
«Выполняется»	Робот проверил страницу. Страница будет удалена из результатов поиска в течение 24 часов.
«Удалено»	Страница удалена из результатов поиска.
«Отклонено»	Страница разрешена для индексации или когда робот обращается к URL страницы, ответ сервера отличается от 404 Not Found, 403 Forbidden или 410 Gone.

Снять запрет на индексацию: директива Disallow в файле robots.txt или метатег noindex. Страницы возвращаются в результаты поиска, когда робот просматривает сайт и узнает об изменениях. Это может занять до трех недель.