Разное

Страница неизвестна работу яндекс вебмастер: Страницы в поиске — Вебмастер. Справка

25.06.2023

Что делать, если найдены проблемы на сайте

Яндекс Вебмастер ежедневно проверяет ваш сайт. Найденные ошибки отображаются на странице Диагностика → Диагностика сайта. Вы можете подписаться на уведомления об обнаружении ошибок.

Шаг 1. Исправьте выявленные ошибки

Выберите категорию обнаруженной проблемы и следуйте инструкциям:

КатегорияОписаниеПримечание
ФатальныеПроверяется соединение с сервером, доступность сайта для индексирования, безопасность и соблюдение правил Яндекса.

Могут вести к исключению отдельных страниц или всего сайта из результатов поиска.

Рекомендуем отслеживать и исправлять их в кратчайшие сроки.

КритичныеПроверяется наличие и корректность SSL-сертификата, количество неработающих внутренних ссылок и время ответа сервера.
Возможные проблемыПроверяется корректность файлов Sitemap и robots.txt, включение обхода страниц со счетчиком Яндекс Метрики, настройки отображения несуществующих файлов, количество страниц-дублей, наличие редиректов, раздражающей рекламы и пр.Могут влиять на качество и скорость индексирования страниц сайта.
РекомендацииКак правило, касаются улучшения представления сайта в результатах поиска.Позволяют улучшить представление сайта в результатах поиска.
Шаг 2. Дождитесь перепроверки сайта

Робот Яндекса узнает об обновлениях на сайте при очередном посещении. Чтобы это произошло быстрее:

  1. Отправьте на переобход страницы с внесенными изменениями. Робот обойдет страницу в течение двух недель.

  2. Убедитесь, что робот обошел страницу — проверьте статус URL.

  3. На странице Диагностика → Диагностика сайта проверьте, отображается ли проблема, которую вы устранили. Если да, нажмите кнопку Проверить.

Если Вебмастер не обнаружит проблему повторно, то сообщение о ней пропадет.

Если вы уверены, что исправили ошибку, но сообщение о ней все еще отображается в Вебмастере, подождите. В этом случае само отображение ошибки не влияет на индексирование вашего сайта.

Чтобы ваш вопрос быстрее попал к нужному специалисту, уточните тему:

Не удалось подключиться к серверу из-за ошибки DNSСайт закрыт для индексирования в файле robots.txt

Если вы следовали рекомендациям и сайт доступен для робота, но ошибка продолжает отображаться в Вебмастере, заполните форму:

Если вы следовали рекомендациям, но ошибка продолжает отображаться в Вебмастере, заполните форму:

Некорректная настройка SSL-сертификатаНайдены страницы-дубли с GET-параметрамиДругая критичная проблема

Если вы следовали рекомендациям, но ошибка продолжает отображаться в Вебмастере, заполните форму:

Если вы недавно добавили директивы в Clean-param, запретили дубли для обхода в robots. txt или разместили атрибут rel=»canonical», может потребоваться несколько дней, чтобы эти изменения были учтены в Диагностике Вебмастера и уведомление перестало отображаться.

Если спустя время ошибка продолжает отображаться в Вебмастере, заполните форму:

Не найден файл robots.txtНет используемых роботом файлов SitemapОбнаружены ошибки в файлах SitemapФайл favicon недоступен для роботаДругой вопрос о возможных проблемах

Посмотрите рекомендации. Если файл доступен для робота и загружается в Вебмастере, но проблема продолжает отображаться, заполните форму:

Посмотрите рекомендации выше. Если файл добавлен больше 2 недель назад, но сообщение не пропадает, заполните форму:

Посмотрите рекомендации выше. Если ошибок в файле нет, но сообщение продолжает отображаться, заполните форму:

Посмотрите рекомендации выше. Если ответ сервера соответствует 200 ОК и значение параметра type соответствует формату файла, но сообщение продолжает отображаться, заполните форму:

Не задана региональная принадлежность сайтаСайт не зарегистрирован в Яндекс БизнесеФайл favicon не найденСайт не оптимизирован для мобильных устройств

Подробную информацию о присвоении региональности см. в разделе Региональность.

Сообщение пропадет, когда робот Яндекса загрузит фавиконку, и она начнет отображаться в результатах поиска.

Фавиконка размещена на сайте правильно, но не отображается в поискеФавиконка появилась в результатах поиска, но рекомендация в Яндекс Вебмастере не пропадает

В этом случае проверьте, посетил ли робот ваш сайт, и отредактируйте фавиконку. Подробно см. в разделе Фавиконка.

Посмотрите рекомендации выше. Если у вас остались вопросы по оптимизации сайта для мобильных устройств, заполните форму:

Пожалуйста, опишите обнаруженную ошибку в форме ниже. Нам будет полезна информация, которая поможет воспроизвести ее. Например, описание действий, которые приводят к возникновению ошибки, и ее скриншот.

Возможные проблемы — Вебмастер. Справка

Раздел содержит решения часто встречающихся проблем категории «Возможные», выявленных при диагностике сайта в Вебмастере. Проблемы этой группы могут влиять на качество и скорость индексирования страниц сайта.

Совет. Настройте уведомления о результатах проверки сайта.

  1. Не найден файл robots.txt
  2. Обнаружены ошибки в файле robots.txt
  3. Нет используемых роботом файлов Sitemap
  4. Обнаружены ошибки в файлах Sitemap
  5. Некорректно настроено отображение несуществующих или удаленных файлов и страниц
  6. Отсутствуют элемент title и метатег description
  7. На страницах есть одинаковые заголовки и описания
  8. Файл favicon недоступен для робота

Несколько раз в сутки индексирующий робот запрашивает файл robots.txt и обновляет информацию о нем в своей базе. Если при очередном обращении робот не может загрузить файл, в Вебмастере появляется соответствующее предупреждение.

В сервисе проверьте доступность файла robots.txt. Если файл по-прежнему недоступен, добавьте его. Если вы не можете сделать это самостоятельно, обратитесь к хостинг-провайдеру или регистратору доменного имени. После добавления файла данные в Вебмастере обновляются в течение нескольких дней.

Проверьте файл robots.txt вашего сайта. Чтобы исправить ошибки, посмотрите описания директив.

Файл Sitemap является вспомогательным инструментом при индексировании сайта, он позволяет регулярно сообщать роботу о появлении новых страниц на сайте. Данное предупреждение появляется, если робот не использует ни одного файла Sitemap для сайта.

Чтобы робот начал использовать созданный файл, добавьте его в Вебмастер и дождитесь обработки файла роботом. Обычно на это требуется до двух недель. После этого предупреждение пропадет.

Проверьте файл Sitemap вашего сайта. Проверка может выявить ошибку «Неизвестный тег». Она сообщает, что файл содержит неподдерживаемые Яндексом элементы. Такие элементы игнорируются роботом при обработке Sitemap, но данные из поддерживаемых элементов учитываются. Поэтому менять содержимое файла необязательно. Подробнее о поддерживаемых элементах Sitemap.

Вероятно, на сайте некорректно настроен возврат HTTP-кода 404 (ресурс не найден/Not Found).

В таком случае поисковый робот может при переходе на сайт по любой ссылке получить ответ 200 ОК и проиндексировать несуществующую страницу. Это приведет к большому количеству дублированных страниц, что усложнит и замедлит индексирование сайта и увеличит нагрузку на сервер.

Чтобы проверить ответ сервера, воспользуйтесь инструментом Проверка состояния страницы. Введите адрес несуществующей на вашем сайте страницы. Можно использовать произвольный набор букв и цифр, например https://example.com/kugbkkrfck.

Если настроить рекомендуемый код ответа 404 нет возможности:

  • Настройте любой другой код 4xx, кроме 429.

    Не рекомендуем использовать коды ответа 429 и 5xx, так как они сообщают роботу, что сервер испытывает затруднения. Это может привести к замедлению индексирования сайта.

  • Используйте директиву noindex или настройте редирект 301.

    При использовании noindex и редиректа 301 уведомления об ошибке могут появляться в Вебмастере, но страницы в поиск не попадут и на позиции сайта это не повлияет.

    Эти способы наименее предпочтительны, так как увеличивают нагрузку на сервер и замедляют индексирование сайта.

Элемент title и метатег description помогают сформировать корректное описание сайта в результатах поиска. Подробно см. раздел Отображение заголовка и описания сайта в результатах поиска.

Если элементы или один из них отсутствуют на вашем сайте, добавьте их в HTML-код страниц и сохраните изменения. Если элементы уже размещены, дождитесь, пока робот переобойдет страницы. После этого сообщение об ошибке исчезнет. Подробно

Эта проблема отображается, если заголовок или описание повторяется на значительной доле страниц сайта. Когда title и description отражают контент страницы, информативны и привлекательны, пользователям удобнее находить ответы в поисковой выдаче.

Посмотрите примеры страниц с повторяющимися заголовками или описаниями, которые обнаружил Вебмастер при обходе сайта роботом. Чтобы исправить их, следуйте рекомендациям по:

  • написанию title;

  • составлению description.

Проблема перестанет отображаться, когда робот узнает об изменениях на сайте. Чтобы это произошло быстрее, отправьте наиболее важные страницы на переобход или настройте обход страниц со счетчиком Метрики.

Если эта проблема отображается для вашего сайта, значит Небольшая картинка, которая отображается в сниппете в результатах поиска Яндекса, рядом с адресом сайта в адресной строке браузера, около названия сайта в Избранном или в Закладках браузера.»}}»> не отображается в результатах поиска. В Вебмастере на странице Диагностика → Диагностика сайта (блок Возможные проблемы) посмотрите причину, по которой робот не смог загрузить файл и следуйте указаниям:

ОшибкаРешение
Файл отвечает HTTP-кодом, отличным от 200 OKПроверьте ответ сервера.
Ответ должен соответствовать 200 OK. Другие статусы ответа см. в разделе Проверка ответа сервера.
Файл перенаправляет на другой адрес
Неправильный тип данныхПроверьте значение параметра type в ссылке на файл. Он должен соответствовать формату файла.

Как установить фавиконку

Чтобы ваш вопрос быстрее попал к нужному специалисту, уточните тему:

Посмотрите рекомендации. Если файл доступен для робота и загружается в Вебмастере, но проблема продолжает отображаться, заполните форму:

Посмотрите рекомендации выше. Если файл добавлен больше 2 недель назад, но сообщение не пропадает, заполните форму:

Посмотрите рекомендации выше. Если ошибок в файле нет, но сообщение продолжает отображаться, заполните форму:

Посмотрите рекомендации выше. Если ответ сервера соответствует 200 ОК и значение параметра type соответствует формату файла, но сообщение продолжает отображаться, заполните форму:

Справочник по ошибкам карты сайта — веб-мастер.

Справка
Не индексируется.

Не удалось загрузить файл карты сайта. URL-адрес файла может быть неправильным.

Превышен максимальный размер файла

Размер файла Sitemap превышает 50 МБ.

Ошибка HTTP

При попытке загрузить файл карты сайта был получен статус HTTP, отличный от 200.

Неверный URL-адрес

Указан неверный URL-адрес файла карты сайта.

Соединение потеряно

Сервер прервал соединение при загрузке файла карты сайта.

Ошибка DNS

Не удалось загрузить файл из-за ошибки DNS. URL-адрес файла может быть неправильным.

Ошибка подключения

Не удалось загрузить файл Sitemap из-за ошибки подключения к серверу.

URL-адрес запрещен в robots.txt

URL-адрес файла карты сайта запрещен в файле robots.txt, поэтому его невозможно загрузить. Проверьте правильность файла robots.txt и адреса файла карты сайта.

Неверный ответ HTTP

Не удалось загрузить файл Sitemap, поскольку ответ веб-сервера не соответствует протоколу HTTP.

Ответ не содержит данных

При загрузке файла карты сайта сервер вернул пустой документ.

Ошибка извлечения

Произошла ошибка при распаковке файла Sitemap, сжатого с помощью gzip.

Тег найден более одного раза

Указанный тег должен встречаться в данном контексте только один раз.

Неизвестный тег

Указанный тег не должен встречаться в данном контексте.

Тег не найден

Отсутствует требуемый тег.

Неверный адрес страницы

URL-адрес не соответствует стандарту.

Неверный URL-адрес (не соответствует расположению файла Sitemap)

Расположение файла Sitemap определяет набор URL-адресов, которые можно включить в этот файл. Файл, расположенный в каталоге, должен содержать URL из того же каталога или его подкаталогов. Дополнительные сведения см. в разделе Местоположение файла Sitemap.

URL-адрес слишком длинный

Длина URL-адреса превышает ограничение (1024 символа).

Тег не может быть пустым

Указанный тег не должен быть пустым.

Тег не может содержать другие теги

Указанный тег не должен содержать вложенных тегов.

Превышен лимит данных

Указанный тег содержит слишком много данных.

Тег пустой

Указанный тег не содержит необходимых данных.

Неверная кодировка

Файл Sitemap начинается с неправильного префикса UTF-8 (0xEF 0xBB 0xBF). Он должен начинаться с

Invalid XML

Файл карты сайта не является правильно сформированным XML-документом, соответствующим правилам синтаксиса XML. .

Слишком много ошибок (обработка прекращена)

В файле Sitemap обнаружено более 100 ошибок. Дальнейшая обработка файла была прекращена.

Превышен лимит URL-адресов

Файл Sitemap может содержать не более 50 000 URL-адресов. Если вам нужно перечислить более 50 000 URL-адресов, вам следует создать несколько файлов Sitemap и включить их в файл индекса Sitemap (см. Использование файлов индекса Sitemap).

Количество файлов Sitemap превышает лимит

Файл индекса Sitemap может содержать не более 50000 URL-адресов файлов Sitemap.

Несколько неверных URL-адресов в файле (обработка прекращена)

Файл Sitemap начинается с последовательных неверных URL-адресов. Дальнейшая обработка файла была прекращена, так как файл, вероятно, имеет недопустимый формат.

Файл индекса карты сайта не может содержать ссылки на другие файлы индекса карты сайта

Файл индекса карты сайта может содержать ссылки только на файлы карты сайта, но не на другие файлы индекса карты сайта.

Ошибка корневого тега

Произошла ошибка при обработке корневого тега.

Отслеживание появления «скрытых» URL в поисковой системе — Общий форум для веб-мастеров в WebmasterWorld

Для этой страницы требуется JavaScript.

Сообщение слишком старое, нет ответов

Отслеживание того, как «скрытые» URL-адреса появлялись в поисковой системе.

Яндекс, кажется, направляет посетителей в бэтпещеру

швим

13:45 21 декабря 2016 г. (GMT 0)


Всем привет!

Я написал платформу электронной коммерции с нуля. Там есть раздел администратора, и шаблон использует переключатели для отображения ссылки администратора только для тех, у кого есть достаточные привилегии в заголовке для удобства. В последнее время у меня стали появляться посещения страниц, которые должны быть полностью скрыты от всех остальных, боты подключены через Яндекс, и я хотел бы узнать, как

Яндекс наткнулся на эти ссылки .

Итак, вот что я сделал до сих пор, чтобы попытаться выяснить, как ссылки оказались видимыми (пока все безрезультатно):

1) Первое, что я сделал, это попытался расшифровать URL-адрес перенаправления Яндекса. отступить. К сожалению, я не могу найти информацию о том, как это сделать, и перенаправление не соответствует тому, что оно делает, когда я ввожу поисковый запрос в поисковой системе. Например, переменная «text» совершенно пуста, и вся информация, кажется, упакована в переменную «etext», которую я не могу понять, как она используется. Может «зашифрованный текст»? Я пытался вставить все различные vars в URL-адрес поиска на сайте Яндекса, но все мои усилия привели к пустой странице поиска.

Рассматриваемый URL:
[noparse]http://yandex.ru/clck/jsredir?from=yandex.ru%3Bsearch%3Bweb%3B%3B&text=&etext=1271.RJS9ZfLhVdj6nXam87qy4e0e-DG9BQd_KlyA1gFVBu1uuZOuUS RTgOEasX71Cupm.fe839c38b17c539463c0b2f7d01d86940f4b3320&uuid=&state=_BLhILn4SxNIvvL0W45KSic66uCIg23qh8iRG98qeIXmeppkgUc0YL_nDC5hqtEQ6WayFoZKRZE&data =UlNrNmk5WktYejY4cHFySjRXSWhXUFJiWDhna1NqZnBmd1YzNG43VS13RUpmdUZXdnBLOHdkMFlqUzVDamF1OVBVb2xkMmtvMUxXWUxJM1hSVW5hS2x5R1R6LVpCcGVXZFZZNkprR 0JOSUVPc3d0ZnBVOXpDV295ckZDdFpqS3l4WkZSOFF3c0RmVTN2ZkhIYWIwT0JzNVQyWko5ME9vMw&b64e=2&sign=08505d8afebc7cb1b4568d3e92c11ecb&keyno=0&cst=AiuY0DBWFJ7IXge4WdYJQXbYQp9t5 VF6sf_IfF4r6pdt0ojCe4cFQNegojWnJn8UToJJyLyR96RrC_bl9mqJxfCjbo3nl3EPqUjNd2ADc0Zxar8tKC1hQd4R3WTMI1AD3dVkg_IhwheNgkWXjuLnig&ref=orjY4mGPRjk5boDnW 0uvlrrd71vZw9kp5uQozpMtKCXdCnh-_wii4V8gT36dWFhYdLgT8HVc5IPL1yluhUPYHlzmn9nr8Aaa3y8eC13fJRd5RgTTAPeGmg&l10n=ru&cts=1481853806438&mc=4.

3 2492874929[/noparse]

Далее я скачал весь сайт через wget при этом используя и браузер и яндекс поиск UA(так мой сайт отличает ботов чтобы скрыть логины и персональный контент). Выполнив поиск по всему загруженному контенту, я не смог найти ни одного экземпляра рассматриваемых URL-адресов.

Я проверил файл sitemap.xml, чтобы убедиться, что он случайно туда не попал. Все чисто.

Наконец, я сделал множество поисков на сайте Яндекса, чтобы посмотреть, смогу ли я наткнуться на что-нибудь, но я с трудом могу найти сайт, упомянутый в поисковой системе, не говоря уже о том, чтобы найти URL-адреса «нет-нет».

Итак, в отсутствие какого-либо прогресса в этом, я предпринял шаги по запрету любых ботов Яндекса, а также автоматически заблокировал любого пользователя, который либо показывает URL-адрес Яндекса в качестве реферера, либо использует YaBrowser Яндекса. Это не повредит сайту, так как он продает товары только Муррике, а Яндекс был источником только злонамеренных посещений. Еще один интересный момент заключается в том, что Яндекс — единственная поисковая система, которая является посредником для этих скрытых ссылок.

Я вообразил несколько сценариев, которые могли стать причиной появления этих ссылок. Я имею в виду, что Яндекс может быть не источником. Ссылки могли быть подобраны Яндексом на вредоносном сайте, где они делятся ссылками, или посетители, о которых идет речь, могли использовать поисковую систему Яндекса для сокрытия входящих ссылок. На данный момент я, честно говоря, понятия не имею. В любом случае, вот мои мысли:

1) Мой код был ошибочным. Хотя сейчас все страницы проверяются, возможно, в какой-то момент мои проверки безопасности не сработали, когда сработал сканер. Тот факт, что только одна поисковая система показывает ссылки, делает это несколько маловероятным.
2) Сайт взломан. Это маловероятно, так как сайт отслеживает всех посетителей в течение 30 дней, я всегда нахожусь на сайте и постоянно отслеживаю посещения, чтобы увидеть, что происходит. Им придется найти способ обойти систему слежения, что маловероятно.
3) База данных очищена. Возможно, они получили ссылки из базы данных либо на веб-сервере, либо в удаленном хранилище резервных копий.
4) Я как-то нечаянно ими поделился. Часто, когда я прошу помощи на форумах по дизайну или PHP, я сохраняю сгенерированный файл HTML на сервере, чтобы другие могли видеть рассматриваемую страницу. Я стараюсь быть осторожным, чтобы удалить чувствительные части, но, возможно, я пропустил это однажды.

Вот и все, я думаю. Если у вас есть идеи по расшифровке URL-адреса перенаправления Яндекса или о том, как еще я могу отследить происхождение этих ссылок в Интернете, я был бы рад услышать это. Спасибо за ваше время!

 

Эта ветка из 45 сообщений занимает 2 страницы: 45

Присоединяйтесь к беседе
  • Зарегистрируйтесь бесплатно! — Стать профессиональным участником!
  • Смотрите категории форума — Войдите на форумi>
Модераторы и ведущие участники
  • Список модераторов  | Ведущие участники: на этой неделе Этот месяц, апр, Мар, Архив, 100 лучших за все время, Участники с наибольшим количеством голосов
Горячие темы на этой неделе