что это такое, чем они опасны и как от них избавиться
Наверняка многие из вас попадали в ситуацию, когда кликаешь по ссылке на сайте и попадаешь на страницу с текстом «404 Error», «Not Found» или «Страница не найдена». К примеру, вот такую:
Рис.1. Пример 404 страницы
Согласитесь, это неприятно? И раздражает практически всех пользователей! Следовательно, владельцы сайтов не должны допускать такой оплошности – нужно своевременно отслеживать и удалять такие нерабочие ссылки.
Именно об этом мы и поговорим в статье. Но сначала немного теории.
Что такое битые ссылки и какие они бывают?
Битые ссылки (еще их называют «мертвые ссылки») – гиперссылки, которые ведут на несуществующий сайт, веб-страницу или отдельный файл (изображение, файл с музыкой, фотографии и пр.). Обычно они сопровождаются ошибками (чаще всего 404-й).
Такие ссылки можно сравнить с домом на карте, которого на самом деле не существует: на карте здание отмечено, но в реальности его нет.
Различают два вида битых ссылок: внешние и внутренние.
Внешние битые ссылки – это гиперссылки, которые ведут на сторонние ресурсы, а не на страницы внутри одного ресурса.
Внутренние битые ссылки – ссылки веб-сайта, которые ведут на страницы, документы и файлы этого самого сайта.
Почему битые ссылки – это плохо?
Битые ссылки очень вредят ресурсу. Первое и самое главное – они раздражают пользователей. Посетитель переходит по ссылке в поиске нужной информации, а по итогу получает сообщение, что такой страницы нет или документ не обнаружен. Так пользователи теряют доверие, чаще всего закрывают сайт и не возвращаются.
И хорошо, если страница 404 оформлена правильно и пользователю предлагаются варианты дальнейшего взаимодействия с сайтом, есть шансы не упустить посетителя совсем. Например, на сайте М-Видео с несуществующей страницы можно вернуться на главную или изучить каталог:
Рис.2. Пример 404-страницы на сайте М-Видео
Но очень часто встречаются ресурсы с неоформленной 404-страницей, наткнувшись на которую, скорее всего, пользователь просто нажмет на крестик.
И вот отличный пример:
Рис.3. Неправильно оформленная 404 страница
Кстати, в одной из статей мы делали подборку красивых 404-страниц и рассказывали, как правильно их оформить. Советую обязательно посмотреть, думаю многих эта подборка вдохновит на создание своей уникальной страницы.
Но кроме плохого восприятия посетителей сайтов к мертвым ссылкам, нельзя не отметить и не очень хорошее отношение поисковиков. Яндекс и Google могут негативно относиться к сайту, на котором большое количество ссылок, которые ведет в никуда.
Стоит также отметить, что наличие большого количества битых ссылок – это признак некачественного ресурса. И чтобы ваш сайт не подорвал доверие пользователей и поисковых систем, мы рекомендуем внимательно следить за их появлением.
Откуда же берутся мертвые ссылки?
Причины могут быть разными, вот основные из них:
- сайт, веб-страница или файл были удалены. Например, в статье вы делали обзор какого-либо сервиса, а со временем он перестал существовать, в тексте же ссылка на него осталась.
Читатель перейдет по ссылке и попадет на этот несуществующий сервис, вот и причина возникновения битой ссылки на вашем сайте. - изменилась структура сайта, заменены адреса страниц. Например, раньше ваш каталог назывался /products, а тут вы решили сменить URl и указать /catalog. А о ссылках, которые уже были размещены по всему сайту не подумали, вот и образовалась «гора» битых ссылок – только из-за смены одного слова в URL.
- при добавлении ссылки была допущена опечатка в адресе. Например, ваш вебмастер, добавляя ссылки, случайно вставил ненужную букву в окончании адреса.
Читатель перейдет по ссылке и попадет на этот несуществующий сервис, вот и причина возникновения битой ссылки на вашем сайте.Как исправить битую ссылку?
Если ссылка стала битой из-за ошибки или опечатки в адресе, то нужно просто указать правильный URL. Если же страница, на которую ссылается гиперссылка, перестала существовать, стоит удалить ссылку или исправить ее на ту, которая актуальна.
При изменении URL-структуры следует настроить постоянное постраничное перенаправление с помощью 301 редиректа в файле .
htaccess.
Теперь предлагаю разобраться, какими способами можно обнаружить на своем сайте битые ссылки.
Как найти битые ссылки на сайте?
Способ № 1. Вручную
Не самый эффективный способ и подходящий далеко не всем. Если вы обладатель ресурса с 20-30 страницами, такой метод вполне хорош. Вы можете отдельно открыть каждую и изучить на ней все ссылки, проверить их на работоспособность. Но даже вручную можно что-то упустить.
Способ № 2. Яндекс.Вебмастер
Вебмастер Яндекса поможет найти на сайте 404 страницы и битые ссылки с указанием адресов страниц, с которых они получены и на какие страницы ведут.
Для этого необходимо войти в Яндекс.Вебмастер, пере йти в раздел Ссылки. В разделе «Внутренние ссылки» вы сможете посмотреть битые ссылки внутри сайта, а «Внешние» – те, что ведут со сторонних ресурсов.
Рис.4. Поиск 404-страниц в Яндекс.Вебмастере
Сервис представит список нерабочих ссылок с указанием ответа сервера, откуда и куда они ведут.
Если все в порядке, будет указано «Робот не обнаружил битых ссылок».
Рис.5. Страницы 404 в Яндекс.Вебмастере
Способ № 3. Google Search Console
Через Вебмастер от Google тоже можно найти страницы с 404 ошибкой на вашем сайте, это поможет в устранении битых ссылок.
Для этого нужно войти в Google Search Console, выбрать раздел «Покрытие» → «Исключено» и кликнуть на статус «Не найдено (404)»:
Рис.6. Поиск 404 страниц через Google Search Console
Так вы получите весь список 404 страниц вашего сайта:
Рис.7. Страницы 404 в Вебмастере Google
Способ № 4. Сервис Online Broken Link Checker
Признаюсь честно, это мой любимый метод – считаю его надежным, простым и очень понятным. Только есть одно НО: проверить бесплатно можно только 3000 страниц сайта, сервис сам определяет какие. Если на вашем сайте более 3-х тысяч страниц, то нужно запрашивать ценовое предложение и оплачивать проверку.
Чтобы найти битые ссылки, войдите на сервис, введите адрес сайта, укажите код, выберите проверку всех битых ссылок, далее нажмите «Искать все битые ссылки сейчас»:
Рис.
8. Broken Link Checker
По окончании проверки сервис выдаст таблицу, в которой будут указаны битые и некорректные ссылки, их текст, статус и даже страницы, на которых они находятся:
Рис.9. Примеры битых ссылок в Broken Link Checker
Способ № 5. Программа Netpeak Spider
Программа Netpeak Spider очень полезна для вебмастеров и владельцев сайтов, вы сможете не только найти 404-е страницы на сайте, но и проанализировать свой ресурс, посмотреть важные для продвижения теги (Title, Desсription, заголовки Н), узнать состояние редиректов и атрибута <canonical>. В общем, всем рекомендую.
Для поиска 404 страниц вам нужно установить программу, указать в строке URL-адрес сайта, запустить проверку кнопкой Play:
Рис.10. Netpeak Spider (битые ссылки)
Далее выбираем вкладку «Ошибки» и смотрим список страниц с ответом 404:
Рис.11. Поиск 404 страниц через Netpeak Spider
Способ № 6. Программа Xenu’s Link Sleuth
Еще одна хороший сервис для проверки битых ссылок на сайте.
Чтобы найти нерабочие ссылки, установите программу, откройте, укажите адрес сайта в строке URL и запустите проверку:
Рис.12. Xenu Link
Далее по статусу можно отсортировать все нерабочие страницы и файлы:
Рис.13. Проверка битых ссылок в Xenu Link
Способ № 7. Программа Comparser
Сразу же скажу, что это очень эффективная программа для глубокого изучения индексации сайта, с помощью нее вы сможете проанализировать многие параметры сайта, в том числе и битые ссылки.
Для этого вам нужно установить программу, запустить проверку сайта, в разделе «Статистика» будет указано количество 404 страниц:
Рис.14. Comparser (проверка 404 страниц)
Программа предоставит весь перечень 404 страниц на сайте:
Рис.15. Поиск битых ссылок в Comparser
Способ № 8. Поиск битых ссылок на сайте с помощью плагинов
Для сайтов на Wordpress существуют два мощных плагина: Broken Link Checker и WP Broken Link Status Checker.
Инструменты проверяют контент на наличие битых ссылок, несуществующих картинок и оповещают через админ-панель, страницу самого плагина или по email. Вы сможете не только быстро находить нерабочие ссылки, но и удалять, корректировать их через плагин.
Неплохое расширение для проверки битых ссылок предлагает Google – Check My Links. Туллбар позволяет найти на странице все ссылки, указывает как действующие, а какие нерабочие. Минус в том, что сканирование через плагин постраничное, целиком сайт проверить не получится.
Заключение
Конечно, вариантов поиска битых ссылок больше, но мы постарались перечислить одни из самых эффективных, понятных и, что важно, бесплатных. Не забывайте отслеживать и устранять битые ссылки на своем сайте вовремя, чтобы не злить читателей и не вредить продвижению.
Помощь в поиске и исправлении битых ссылок, а также другие услуги по улучшению и продвижению ваших сайтов вы всегда можете заказать у нас.
Два простых способа найти битые ссылки на сайте
Главная | Все статьи | Дневник студентаВремя чтения статьи ~1 минута
Статья написана студентом Хекслета.
Мнение автора может не совпадать с позицией редакции
Битые ссылки — это гиперссылки, которые ведут на несуществующий контент. Это могут быть ссылки на картинки, видео, посты на другие сайты и прочее. Как правило, они сопровождаются 404 ошибкой.
- Первый способ
- Второй способ
Причин возникновения битых ссылок может быть много. Например, страница удалена или сайт перенесли на другой домен.
Битые ссылки негативно влияют на сайт. Когда пользователь нажимает на такую ссылку, то он сталкивается с 404 ошибкой. Это плохо влияет на репутацию сайта. Чаще всего он закрывает страницу и уходит с сайта. Поисковые системы также не любят такие сайты. Битые ссылки найти не так уж сложно.
Я пользуюсь двумя способами — через программы Xenu и Screaming Frog Seo Spider.
Первый способ
Этот способ я считаю наиболее удобным, потому что программа Xenu является бесплатной и мало весит. После установки нужно установить следующие настройки:
Далее выбираем «File» — «Check URL».
Далее вводим URL вашего сайта. Я буду показывать на примере сайта https://nalog.center.
Если вы хотите проверить весь сайт, необходимо будет ввести полностью URL сайта вместе с https://. Далее нужно будет подождать. Время зависит от объема Вашего сайта. После окончания проверки вы получите сообщение.
Начинаем анализировать ссылки. Стоит обратить внимание на те, что отмечены красным цветом.
Эта ссылка является «битой». Ее необходимо удалить или заменить.
Второй способ
Эта программа платная, но более мощная. Чтобы найти битые ссылки с помощью Screaming Frog SEO Spider, необходимо в поле для ввода адреса ввести URL.
После завершения анализа сайта необходимо перейти в меню «Bulk Export», далее «Response Code», далее «Client Error 4xx Inlinks».
После этого вы получите Excel — файл с битыми ссылками.
Мария Мардеева 02 июня 2020
Рекомендуемые программы
профессия
• от 6 300 ₽ в месяц
Фронтенд-разработчик
Разработка фронтенд-компонентов для веб-приложений
10 месяцев •
с нуляСтарт 22 июня
профессия
• от 5 025 ₽ в месяц
Аналитик данных
Сбор, анализ и интерпретация данных
9 месяцев •
с нуляСтарт 22 июня
профессия
• от 6 300 ₽ в месяц
Python-разработчик
Разработка веб-приложений на Django
10 месяцев •
с нуляСтарт 22 июня
профессия
• от 6 300 ₽ в месяц
Java-разработчик
Разработка приложений на языке Java
10 месяцев •
с нуляСтарт 22 июня
профессия
• от 6 300 ₽ в месяц
PHP-разработчик
Разработка веб-приложений на Laravel
10 месяцев •
с нуляСтарт 22 июня
профессия
• от 6 183 ₽ в месяц
Инженер по тестированию
Ручное тестирование веб-приложений
4 месяца •
с нуляСтарт 22 июня
профессия
• от 6 300 ₽ в месяц
Node.
js-разработчик
Разработка бэкенд-компонентов для веб-приложений
10 месяцев •
с нуляСтарт 22 июня
профессия
• от 10 080 ₽ в месяц
Fullstack-разработчик
Разработка фронтенд- и бэкенд-компонентов для веб-приложений
16 месяцев •
с нуляСтарт 22 июня
профессия
• от 5 840 ₽ в месяц
Разработчик на Ruby on Rails
Создание веб-приложений со скоростью света
5 месяцев •
c опытомСтарт 22 июня
профессия
Верстальщик
Верстка с использованием последних стандартов CSS
5 месяцев •
с нуляСтарт в любое время
профессия
• от 6 300 ₽ в месяц
Инженер по автоматизированному тестированию на JavaScript
Автоматизированное тестирование веб-приложений на JavaScript
10 месяцев •
с нуляв разработке
дата определяется
Часто задаваемые вопросы — Проверка мертвых ссылок
Вот некоторые распространенные вопросы и ответы на них.
Описание возможностей Dead Link Checker можно найти здесь.
Щелкните здесь для получения списка кодов ошибок и их значений.
Если у вас есть вопрос, на который здесь нет ответа, вы можете связаться с нами по адресу:
[email protected]
В: Что такое мертвые/битые ссылки?
Мертвые или неработающие ссылки — это ссылки на веб-странице, которые не ведут пользователя туда, куда предполагал автор. Это может быть связано с тем, что ссылка была неправильно настроена автором сайта, или из-за того, что целевой веб-страницы больше не существует, или из-за какой-либо другой проблемы с доступом к месту назначения (например, сервер не отвечает). Когда щелчок по неработающей ссылке, код ошибки (например, 404 Not Found или 500 Server Error) обычно возвращается сервером или происходит тайм-аут, если сервер не существует или не возвращает никакой информации в течение заданный промежуток времени.
Неработающие ссылки являются источником раздражения для пользователей и снижают рейтинг вашего сайта в результатах поиска.
Интерактивная версия этого сервиса бесплатна. Вы можете ввести URL-адрес веб-сайта, и он будет просканирован на наличие мертвых ссылок. Если вы вошли в систему с действительным адресом электронной почты, вы
может запросить отправку отчета по электронной почте после завершения сканирования, и вы можете указать несколько веб-сайтов для сканирования за одну операцию. Если вы делаете небольшой ежемесячный платеж
Чтобы подписаться на нашу автоматическую проверку, вы можете настроить ежедневное, еженедельное или ежемесячное расписание для автоматического сканирования ряда сайтов без каких-либо дополнительных действий.
Отчеты будут отправлены вам по электронной почте с подробной информацией о любых мертвых ссылках, обнаруженных на ваших веб-страницах.
SEO расшифровывается как поисковая оптимизация. Поисковые системы, такие как Google, Bing и т. д., упорядочивают свои результаты по ряду критериев, включая воспринимаемое качество сайт индексируется. SEO предназначено для того, чтобы сайт занимал как можно более высокие позиции в результатах поисковой системы. Удаляя мертвые ссылки со своих веб-страниц, вы можете сигнализировать поисковых систем, что сайт является активно поддерживаемым и надежным источником информации.
Некоторые распространенные коды состояния сервера:
- 302 — страница перемещена на новое место
- 403 — запрещено
- 404 — страница не найдена
- 500 — внутренняя ошибка сервера
Дополнительная информация можно найти здесь.
В: Как запланировать сканирование сайта?
com, используя свой адрес электронной почты, вы можете
настроить сканирование по расписанию, щелкнув пункт меню «автоматическая проверка». При нажатии на кнопку «Добавить новое сканирование» появится небольшое окно, в котором вы можете
введите URL-адрес веб-сайта для сканирования, когда должно произойти следующее сканирование, как часто следует сканировать сайт и глубину сканирования. Щелчок
кнопка «Сейчас» запланирует запуск сканирования как можно скорее после того, как вы нажмете «Создать». Когда сканирование запланировано, вы сможете проверить его статус или отредактировать детали сканирования. После запуска сканирования вы будете отправил по электронной почте отчет с подробной информацией о любых найденных мертвых ссылках. В: Как исправить плохие ссылки?
Чтобы исправить неверную ссылку, необходимо определить, почему ссылка помечена как неверная. Если это ссылка на несуществующую страницу (ошибка 404), то, скорее всего, ссылка была
неправильно набран в исходном HTML-коде (в этом случае вам необходимо его отредактировать) или целевая страница была временно или окончательно удалена или переименована.
Если пункт назначения больше не существует
тогда вам либо нужно сделать ссылку на другую страницу, либо полностью удалить ссылку. В любом случае, если вы хотите изменить
ссылку, то вам нужно будет иметь возможность редактировать HTML-код веб-сайта или иметь доступ к кому-то, кто может сделать это за вас.
Нет, к сожалению, невозможно использовать средство проверки мертвых ссылок для сканирования страниц, защищенных паролем. Для этого наш сервер должен знать и хранить имя пользователя и пароль. сведения о сканируемом сайте, что может представлять угрозу безопасности.
В: Могу ли я ограничить сканирование подкаталогом моего сайта? Да — если вы начинаете сканирование со страницы в подкаталоге, то все ссылки, найденные на этой странице, будут проверены на существование, но только страницы в этом подкаталоге (или его потомке) будут проверены.
отсканировано для дальнейших ссылок.
Например, начиная с http://www.
example.com/news/index.html, будут проверяться ссылки на такие страницы, как http://www.example.com/weather.html, но эта страница не будет сканироваться на наличие
больше ссылок, так как он не находится в подкаталоге новостей/. Однако страница http://www.example/com/news/current/story1.html будет просканирована на наличие ссылок, так как она находится в подкаталоге news/.
Обратите внимание, что это функция только автоматической проверки.
В корне большинства веб-сайтов находится файл robots.txt, например http://www.microsoft.com/robots.txt. Этот файл используется, чтобы сообщить
любая система, которая сканирует сайт (например, средство проверки ссылок или сканер сайта поисковой системы), какие страницы или папки не следует сканировать или индексировать. Файл robots.txt также можно использовать для указания местоположения
карта сайта и уменьшить скорость, с которой автоматические системы запрашивают страницы с сайта (используя директиву ‘crawl-delay’).
Обратите внимание, что сканер не обязан следовать инструкциям в файле robots.txt.
это просто просьба вести себя определенным образом, но хорошо воспитанные сканеры попытаются подчиниться директивам. Dead Link Checker следует директивам «запретить» и «задержка сканирования», где это возможно. Используемый пользовательский агент
от Dead Link Checker — «www.deadlinkchecker.com». Для получения дополнительной информации о robots.txt посетите http://www.robotstxt.org/.
Этого можно добиться двумя способами. Если у вас есть возможность редактировать файл robots.txt на сервере веб-сайта, вы можете добавить директиву, запрещающую проверке ссылок доступ к определенным страницам или ко всем страницам в определенном подкаталоге. Например, чтобы исключить
папку shoppingbasket/ (и все ее потомки), добавьте в robots.txt следующее:
Агент пользователя: www.deadlinkchecker.com Запретить: /корзина покупок/В качестве альтернативы, при использовании автоматической проверки в редакторе запланированного сканирования есть «расширенный» раздел, где вы можете указать список строк, которые будут использоваться для предотвращения проверки определенных URL-адресов.
URL-адреса, содержащие любые
строк, указанных в этом разделе, не будут проверены на наличие ошибок. В: Не все страницы моего сайта были отсканированы, почему? Средство проверки мертвых ссылок проверяет ссылки на исходной странице, предоставленной ему, и, если какие-либо из этих ссылок находятся на том же веб-сайте, оно также проверяет связанные страницы на наличие мертвых ссылок и так далее. Глубина этого сканирования ограничена 10
для полного сканирования, поэтому любые ссылки, которые доступны только при прохождении большего количества шагов, не будут проверяться. Кроме того, страницы, на которые нет входящих ссылок, не будут обнаружены. Еще одно соображение заключается в том, что
изменение субдомена рассматривается как изменение веб-сайта, поэтому ссылки на страницах этих доменов не проверяются (даже если они указывают на исходный домен). Например, при сканировании сайта http://www.example.com,
ссылка на http://test.example.com будет проверена, но содержимое этой страницы не будет дополнительно проверено на наличие ссылок.
Ссылки также могут не сканироваться, если они запрещены в файле robots.txt сайта. Кроме того, Auto Checker будет игнорировать дочерние ссылки на связанных страницах. с использованием атрибута rel=nofollow: сама ссылка будет проверена, но не будет сканироваться на наличие дополнительных ссылок. Страницы, содержащие тег, также не будут проверьте наличие дополнительных ссылок в Auto Checker. Эту обработку ссылок или страниц «nofollow» можно переопределить в расширенном разделе сканирования. всплывающее диалоговое окно настроек с помощью флажка «Переопределить директивы nofollow».
В: Почему средство проверки мертвых ссылок сообщает о ссылках как о плохих, хотя я могу открыть их в своем браузере? В некоторых случаях средство проверки мертвых ссылок может не получить доступ к странице, доступной из вашего браузера.
Наш сервер находится в США, поэтому, если есть проблема с доступом к вашему сайту оттуда, или если ваш сайт
обслуживает различный контент в зависимости (например) от географического местоположения отправителя запроса, его пользовательского агента или IP-адреса, тогда вы можете увидеть сообщения об ошибках.
Некоторые сайты допускают доступ к чему-либо, кроме стандартного веб-браузера, и возвращают такие коды ошибок, как
как 404 (не найдено) или 403 (запрещено) для DeadLinkChecker.com
Некоторые веб-браузеры автоматически исправляют URL-адреса, которые на самом деле недействительны. Например, URL-адреса
не может содержать символ обратной косой черты ‘\’. Chrome и IE, кажется, молча преобразуют его в косую черту «/», но
в других браузерах нет. Средство проверки неработающих ссылок будет помечать такие URL-адреса как ошибки.
Иногда страницы временно недоступны, возможно, из-за проблем с загрузкой сервера. Dead Link Checker повторит попытку
ссылки после паузы, но если он не может получить доступ к странице, он будет помечен как плохая ссылка, даже если это возможно
чтобы перейти на страницу позже.
Сканирование Auto-Checker можно настроить так, чтобы оно игнорировало URL-адреса, которые, как вы знаете, являются действительными — щелкните ссылку «Дополнительно».
в нижней части поля редактирования «Сканирование по расписанию». Вы также можете настроить время ожидания DeadLinkChecker до
решение о том, что страница не отвечает.
Средство проверки мертвых ссылок — это онлайн-инструмент, который не будет работать в интрасети, потому что веб-страницы должны быть видны нашему серверу, который является внешним по отношению к вашей интрасети.
В: Будет ли инструмент работать на динамических (ASP/JSP/PHP/Rails) сайтах?Средство проверки мертвых ссылок будет работать на динамических страницах. Однако он проверяет любой заданный URL-адрес только один раз в сеансе сканирования, поэтому, если содержимое активной страницы изменяется от одного вызова к другому, тогда только ссылки, найденные при первом столкновении. будет обработан.
В: В чем разница между услугами Site Checker, Multi-Site Checker, Auto-Checker и Auto-Checker Premium и Professional? Site Checker — это бесплатный инструмент, который позволяет сканировать один веб-сайт на наличие мертвых ссылок.
Multi-Site Checker также можно использовать бесплатно, но для этого требуется адрес электронной почты.
в качестве имени для входа. Затем вы можете сканировать несколько сайтов за один раз, и отчет автоматически отправляется вам по электронной почте в конце сканирования. Auto-Checker — наш начальный уровень
абонентское обслуживание. За небольшую ежемесячную плату вы можете автоматически сканировать до пяти сайтов по регулярному расписанию, при этом никаких дополнительных действий на вашем устройстве не требуется.
часть. Отчет будет отправлен вам по электронной почте после каждого сканирования, а также доступен в Интернете. Auto-Checker Premium и Professional позволяют проверять большее количество сайтов с большим количеством ссылок.
на каждом сайте.
Средство проверки мертвых ссылок оптимизировано для максимально быстрого сканирования веб-сайтов, при этом скорость сканирования автоматически настраивается для уменьшения количества ошибок сервера.
Однако некоторые серверы могут испытывать трудности, если страницы запрашиваются слишком быстро или запросы
может интерпретироваться как атака типа «отказ в обслуживании». Вы можете снизить скорость запроса страниц, изменив файл robots.txt на своем сервере, включив в него
секция:
Агент пользователя: www.deadlinkchecker.com Задержка сканирования: 1Это ограничит количество запросов страниц примерно до одного в секунду. Сканирование будет значительно замедлено, но нагрузка на сервер будет пропорционально снижена.
В качестве альтернативы при использовании функции автоматической проверки вы можете получить доступ к «расширенным» настройкам в редакторе запланированного сканирования и ввести значение «Интервал», чтобы указать минимальная продолжительность между последовательными запросами страниц на сканируемом веб-сайте. В: Как средство проверки мертвых ссылок идентифицирует себя при сканировании веб-сайта?
Средство проверки мертвых ссылок использует строку пользовательского агента, начинающуюся с «www.
deadlinkchecker.com», при запросе веб-страниц.
IP-адрес сервера — 74.208.42.172 (до марта 2021 года — 82.165.25.77)
При использовании автоматической проверки вы можете посетить страницу автоматической проверки и просмотреть список созданных вами расписаний проверки. Детали все выполняемые проверки перечислены ниже этого раздела — вы можете увидеть статистику проверки, URL-адрес недавно проверенной ссылки и кнопки которые позволяют прервать сканирование или запросить промежуточный отчет об ошибке.
В: Могу ли я уменьшить количество получаемых писем?При использовании автоматической проверки вы можете отредактировать «расширенные» настройки сканирования и установить флажок «подавлять электронную почту, если нет ошибок» — это остановить проверку мертвых ссылок от отправки вам электронных писем, если запланированное сканирование не обнаружило ошибок.
В: Могу ли я изменить адрес электронной почты, на который отправляются отчеты? Из соображений безопасности средство проверки мертвых ссылок отправляет отчеты по электронной почте только зарегистрированному владельцу учетной записи.
Вы можете изменить адрес электронной почты
адрес вашей учетной записи, когда вы вошли в систему, щелкнув значок настроек в правом верхнем углу. В качестве альтернативы следует
можно настроить программное обеспечение электронной почты для пересылки сообщения электронной почты с отчетом третьей стороне в зависимости от отправителя и/или строки темы.
Вы можете настроить Google Analytics для фильтрации всех запросов с IP-адреса средства проверки неработающих ссылок (см. «Как идентифицирует себя средство проверки неработающих ссылок?»). Для инструкции по настройке Google Analytics смотрите здесь.
Вопрос. Считаются ли страницы с разными строками запроса разными страницами? Веб-страницы, созданные сервером, могут изменять свое содержимое в зависимости от переданных им параметров, поэтому средство проверки неработающих ссылок рассматривает страницы с разными строками запроса как
отдельные страницы, которые проверяются отдельно.
Отчеты, сгенерированные подписной службой Auto-Check, также можно загрузить в виде файла CSV, который можно сохранить на свой компьютер и импортировать. в Excel и т. д. для дальнейшего анализа. Ссылка для загрузки показана в нижней части онлайн-отчета.
Q: Что такое петля перенаправления? Когда запрашивается URL-адрес, сервер может ответить кодом состояния перенаправления (301 или 302), указывающим новое местоположение, которое должно быть
запрошенный для ресурса.
Если это новое местоположение совпадает с исходным запросом или если оно, в свою очередь, перенаправляет на исходный URL-адрес, то возникает петля перенаправления.
существует — запросы будут циклироваться бесконечно, никогда не возвращая запрошенную информацию. Dead Link Checker сообщает об этой ситуации
как цикл перенаправления. Большинство браузеров выдают аналогичное сообщение об ошибке после выполнения ряда перенаправлений.
Примечание: Некоторые веб-сайты или серверы ведут себя иначе, если файлы cookie отключены. Средство проверки мертвых ссылок Проверка сайта и множественная проверка не распространяют файлы cookie при сканировании сайта, если средство проверки мертвых ссылок сообщает о петле перенаправления, но кажется, что ссылка работает правильно в браузере, возможно, посещение ссылки с отключенными файлами cookie вызовет ошибку. Автоматическая проверка распространяется куки только для внешних ссылок. Вы можете узнать, как отключить или включить файлы cookie на www.whatarecookies.com/enable.asp
Вопрос. Как оптимизировать сканирование Auto-Checker?Перед запуском сканирования Auto-Checker необходимо выполнить несколько шагов. Выполнение этих шагов поможет оптимизировать использование вашей квоты ссылок, минимизируйте нагрузку на сервер и убедитесь, что вы видите результаты сканирования как можно быстрее.
•
Убедитесь, что электронные письма с адреса report_generator@deadlinkchecker.
com не будут отклонены вашей почтовой программой. Ваши отчеты о сканировании обычно содержат много ссылок,
и иногда это может привести к срабатыванию детекторов спама, которые затем отклонят электронное письмо. Иногда это приводит к тому, что они отправляются в папку со спамом,
но если электронные письма возвращаются нам, это также может помешать отправке последующих электронных писем на вашу учетную запись.
•
Используйте функцию «игнорировать» в настройках сканирования, чтобы запретить сканеру проверять ненужные URL-адреса на вашем сайте. Поле «игнорировать»
позволяет ввести список текстовых фрагментов, и сканер будет игнорировать URL-адреса, содержащие любой из них. Например, если есть
ссылку на каждой из страниц вашего сайта, чтобы добавить товар в корзину, то вам обычно не нужно проверять эти ссылки, поэтому вы можете отфильтровать их
добавив /cart/ или /checkout/ или что-то подобное в список игнорирования — в зависимости от того, как устроен ваш сайт.
Точно так же вы можете захотеть
игнорировать URL-адреса, содержащие, например, /login или /search — проверьте свой веб-сайт на наличие таких URL-адресов перед началом сканирования.
• Убедитесь, что ваш сервер не интерпретирует сканирование как атаку, которая может привести к тому, что серверу проверки ссылок будет отказано в доступе к вашему сайту. Если в этом случае вы обычно увидите большое количество непредвиденных ошибок, обычно (но не всегда) 403 Forbidden, 503 Service Unreachable или 400 Bad Request. Если возможно, внесите в белый список IP-адрес нашего сервера (74.208.42.172), чтобы сканирование всегда было разрешено.
•
На сайтах-каталогах или сайтах, содержащих большие списки элементов, часто есть опции для просмотра элементов страница за страницей с различными фильтрами.
ограничивать или сортировать отображаемые элементы, например, по цвету или по производителю, или по обоим параметрам.
Если эти параметры фильтра добавляются к URL-адресу с помощью ‘?’ параметры
тогда средство проверки ссылок будет рассматривать каждую уникальную комбинацию терминов фильтра как новый URL-адрес. Это может привести к потенциально огромному количеству
различных комбинаций, даже если существует вполне управляемое количество просматриваемых элементов каталога. Например, сайт со списком автомобилей.
могут иметь варианты выбора по производителю, стилю, цвету, возрасту и цене с использованием URL-адреса, такого как
findmeacar.com/list?manufacturer=ford-bmw-mercedes&style=coupe&color=red-green-black&age=3&price=10000-20000Если есть 10 разных производителей на выбор, 9 стилей, 15 цветов, 8 возрастных групп и 5 ценовых диапазонов, и если можно выбрать любой или все эти варианты, то это приведет к более чем 140 триллионам различных комбинаций! Это явно растратит всю вашу квоту на ссылки, не дав ничего полезного. Даже если в каждой категории можно сделать только один выбор (или ни одного), это приведет к более чем 95000 комбинаций.
В таких случаях лучший вариант
чтобы добавить все фильтры в список игнорирования:производитель=Тогда сканер не пропадет ресурсы, сканирующие различные комбинации одних и тех же элементов, но, надеюсь, все же смогут найти все элементы каталога по отдельности, просматривая список постранично.
стиль=
цвет=
возраст=
цена=
• В общем, рекомендуется следить за новым сканированием по мере его выполнения — следить за URL-адресами, которые проверяются на убедитесь, что нет пропущенных параметров фильтра и что все URL-адреса кажутся разумными. Если вам нужно отказаться от сканирования, вы можете нажать кнопку кнопку «Завершить сканирование», измените настройки «игнорировать» и перезапустите сканирование, чтобы повторить попытку.
МУЛЬТИПРОВЕРКА
Multi Check позволяет запускать средство проверки мертвых ссылок на нескольких веб-сайтах за один раз.
Затем отчет автоматически отправляется вам по электронной почте.АВТОПРОВЕРКА
Наша самая популярная услуга — Auto Check, которая запускает проверку неработающих ссылок на вашем веб-сайте (-ах) на регулярно и автоматически отправляет вам отчеты по электронной почте.Планы подписки — средство проверки мертвых ссылок
Гость Войти Создать аккаунт
| Предпочтительная валюта: | $USD €EUR фунтов стерлингов | ||
| * Устройство автоматической проверки — стандартное | * Автоматическая проверка — Премиум | * Auto Checker — Professional | |
|---|---|---|---|
| Проверить сайт | |||
| Проверить список сайтов, отчет по электронной почте | |||
| Автоматическая регулярная проверка сайтов, отчетов по электронной почте | |||
| Максимальное количество веб-сайтов | 1-5 | 100 | 200 | Максимальное количество ссылок в месяц | 50 000 | 500,000 | 1,000,000 |
| Ежемесячный платеж | $9. 95/месяц | $39,95/месяц | $79,90/месяц |
| Годовой платеж | $110/год — ЭКОНОМИЯ 7,5% | $440/год — ЭКОНОМИЯ 8% | $880/год — ЭКОНОМИЯ 8% |
| * Чтобы получить доступ к многосайтовой проверке или автоматической проверке, сначала войдите в систему или создайте бесплатную учетную запись. | |||
- Отличное предложение — менее 10 долларов в месяц.
- Меньше хлопот — особенно если вам нужно регулярно отслеживать несколько веб-сайтов.
- Выбор частоты сканирования — ежедневно, еженедельно или ежемесячно.
- Standard — проверяйте до 5 веб-сайтов в месяц и до 50 000 ссылок за 9,95 долларов США в месяц или разовый платеж в размере 110 долларов США в год.
