Xml карта сайта что это: что это, зачем она нужна, и как её создать – Блог Netpeak Software

подробное описание формата, примеры создания XML карты сайта

Комментарии: 0

 17773

16.10.2018 | Время чтения: 12 минут

Автор: Симагин Андрей

Многие из вас слышали про необходимость наличия у сайта карты Sitemap (он же «сайтмап»), однако не все до конца понимают важность его присутствия на сайте. В данной статье мы проведем обзор файла формата Sitemap.xml, а также опишем варианты его генерации для различных типов сайтов.

Структура статьи:

• Для чего нужна карта сайта
• Описание формата Sitemap
• Маскирование символов
• Разбиение Sitemap на части
• Местоположение Sitemap.xml и его индексация
• Использование кириллических адресов
• Вопросы необходимости карты сайта
• Обзор вариантов генерации Sitemap.xml

Для чего нужна карта сайта Sitemap.xml

Карта сайта Sitemap – это файл XML либо текстового формата (TXT), содержащий в себе все URL сайта (ссылки на страницы либо изображения) и предназначенный для сообщения поисковым роботам информации о новых страницах на вашем ресурсе.

Конечно, поисковые системы проиндексируют ваш сайт и без сайтмапа, и зачастую сделают это не менее качественно, однако в некоторых случаях у поисковиков могут возникнуть сложности с индексацией страниц. Основными причинами неиндексации могут быть такие факторы, как:

• сайт имеет большую вложенность страниц (характерно для крупных веб-ресурсов)
• сайт имеет страницы без навигационных ссылок (на страницы невозможно перейти по внутренней навигации сайта)
• на сайте присутствуют динамические URL

Для подобных страниц из вышеописанных вариантов робот может не добраться никогда, так как в первом случае из-за глубокой вложенности он просто не дойдет до конечного URL, исчерпав краулинговые лимиты сайта, а во втором он физически их не увидит, так как не сможет на них перейти по ссылкам на сайте (например, это может быть вариант, когда ссылка есть, но проставлена при помощи JavaScript, CSS-стилем либо просто зашифрована, из-за чего в исходном коде страницы поисковый робот ее просто не увидит).

Однако, имея информацию о наличии файла Sitemap.xml, поисковый робот будет периодически его обходить и индексировать новые страницы сайта в нужном вам порядке, с необходимым приоритетом и именно по тем страницам, которые вам наиболее важны в данный момент.

Описание формата Sitemap

Sitemap может быть двух типов: текстового формата (TXT) и формата XML.

Текстовый формат представляет собой простой текстовый файл кодировки UTF-8 и содержащий в себе URL сайта в виде наборов строк (каждая ссылка с новой строки). Пример карты сайта текстового формата:

https://www.site.ru/page-1.html
https://www.site.ru/page-2.html

Формат XML является расширенным форматом текстового варианта и позволяет передавать поисковым ботам дополнительную информацию. Пример файла Sitemap.xml:

<?xml version="1.0" encoding="UTF-8"?>
    <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
        <url>
            <loc>http://www. site.ru/</loc>
            <lastmod>2018-10-03</lastmod>
            <changefreq>monthly</changefreq>
            <priority>1.0</priority>
        </url>
        <url>
            <loc>http://www.site.ru/page-1.html</loc>
            <lastmod>2018-10-03</lastmod>
            <changefreq>monthly</changefreq>
            <priority>0.9</priority>
        </url>
        <url>
            <loc>http://www.site.ru/page-2.html</loc>
            <lastmod>2018-10-03</lastmod>
            <changefreq>monthly</changefreq>
            <priority>0.9</priority>
        </url>
        ...
        <url>
            <loc>http://www.site.ru/page-N.html</loc>
            <lastmod>2018-10-03</lastmod>
            <changefreq>monthly</changefreq>
            <priority>0.   9</priority>
        </url>
    </urlset>

Описание элементов XML, на которые необходимо обратить внимание:

• url (обязательный параметр) – содержит все сведения о конкретном URL
  • loc (обязательный параметр) – URL страницы. Для URL с параметрами необходимо маскирование
  • lastmod – дата и время последнего изменения страницы в формате Datetime. При необходимости допускается опустить сегмент времени и использовать формат ГГГГ-ММ-ДД
  • changefreq – указание рекомендательной частоты изменения страницы. Может принимать значения: always, hourly, daily, weekly, monthly, yearly, never
  • priority – значимость страницы относительно других URL сайта. Допустимый диапазон значений 0.0 до 1.0. Чем страница важнее, тем приоритет больше. У главной страницы приоритет всегда равен 1, по умолчанию приоритет 0.5

Примечание: стоит упомянуть, что содержимое карты сайта является лишь рекомендацией поисковым роботам по обходу страниц (если установить периодичность обхода страниц раз в неделю, то робот может их обходить гораздо чаще, и наоборот, если установить частоту обхода ежечасно, то это не значит, что поисковики будут индексировать страницу каждый час).

Прочие форматы XML карты сайта:

• Файл Sitemap для изображений
  • Отдельный сайтмап для изображений будет полезен, если изображения не доступны боту напрямую (например, если они загружаются с помощью JavaScript). Однако, зачастую, для этого можно использовать обычный Sitemap.xml и указывать в нем ссылки на изображения вместе с обычными URL. Подробнее о сайтмап для изображений в справке Google
• Файл Sitemap для новостей
  • Используется для быстрой индексации новостных материалов вашего сайта, при этом ваш ресурс должен быть включен в каталог Google Новости. Требования к Sitemap: должен содержать не более 1000 URL, должен содержать URL новостей, опубликованных за последние два дня. Подробнее о сайтмап для новостей в справке Google

Маскирование

Маскирование в Sitemap.xml используется для URL-адресов и предназначено для интерпретации обычных символов в их псевдокоды в формате HTML:

• Амперсанд: & -> &
• Одинарные кавычки: ‘ -> '
• Двойные кавычки: » -> "
• Больше: > -> >
• Меньше: < -> &lt;

Таким образом, всем привычный URL с параметрами и не маскированными спецсимволами по стандартам XML будет невалиден, пример:

Стандартный URL страницы (не валидный)

https://www. site.ru/index.php?page=news&date=22071981

Валидный URL в Sitemap с маскированием (символ «&» заменен на «&amp;»)

<loc>https://www.site.ru/index.php?page=news&amp;date=22071981</loc>

Для символов в URL, отличных от ASCI, помимо & также необходимо применять маскирование. Пример для URL-адреса:

http://www.site.ru/контакты.html

Тот же URL-адрес с использованием маскирования, для размещения в Sitemap:

http://www.site.ru/%D0%BA%D0%BE%D0%BD%D1%82%D0%B0%D0%BA%D1%82%D1%8B.html

Разбиение Sitemap на составные части

У файла Sitemap.xml есть ограничение как на объем содержащихся в нем URL, так и на сам размер файла. В каждом файле Sitemap.xml должно содержаться не более 50 000 URL, а его объем не должен превышать 50 Мб для Google и 10 Мб для Яндекса (при необходимости файл можно сжать в формат «gzip», но, тем не менее, в распакованном виде он также не должен превышать размер в 50 мегабайт), поэтому при необходимости указания более 50 000 URL-адресов, следует создать несколько файлов Sitemap.

Таким образом, за счет возможности разбиения Sitemap на части, можно обойти все эти ограничения и спокойно генерировать Sitemap для десятков и сотен тысяч страниц.

Разбиение происходит путем создания основного индексного файла Sitemap.xml, содержащего ссылки на дочерние файлы, которые в свою очередь являются стандартными файлами Sitemap.xml и содержат список конечных URL вашего сайта. В основном индексном файле для указания ссылок на дочерние сайтмап используется все тот же тег <loc>, обрамленный тегом <sitemap>, и содержащий ссылки на дочерние Sitemap.xml (названия дочерних сайтмап можно указывать произвольно).

Пример индексного файла XML Sitemap:

<?xml version="1.0" encoding="UTF-8"?>
<sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
   <sitemap>
      <loc>http://www.site.ru/sitemap-1.xml</loc>
      <lastmod>2018-09-25T21:38:17+00:00</lastmod>
   </sitemap>
   <sitemap>
      <loc>http://www. site.ru/sitemap-2.xml</loc>
      <lastmod>2018-09-21</lastmod>
   </sitemap>
</sitemapindex>

Формат дочерних файлов карт сайта XML-формата аналогичен стандартным Sitemap.xml.

Местоположение Sitemap.xml и его индексация

Стандартным вариантом размещения сайтмап является корень сайта, пример:

https://www.site.ru/sitemap.xml

При размещении «sitemap.xml» необходимо учитывать тот факт, что набор URL-адресов, которые можно включить в Sitemap определяется именно расположением на сайте, то есть при размещении карты сайта по адресу http://site.ru/news/sitemap.xml она может включать только URL-адреса, начинающиеся с http://site.ru/news/, но не должен включать адреса, начинающиеся с http://site.ru/pages/. Примеры допустимых URL для http://site.ru/news/sitemap.xml:

http://site.ru/news/25092018/
http://site.ru/news/news-all/

К недопустимым URL-адресам в файле http://site.ru/news/sitemap.xml относятся:

http://site. ru/pages/page-1/
http://site.ru/images/1x1.gif
http://site.ru/contacts/

Таким образом, во избежание проблем с некорректной индексацией, настоятельно рекомендуется размещать Sitemap.xml в корне сайта.

Индексация Sitemap

Поисковые роботы по умолчанию сканируют корневую директорию сайта, поэтому со временем они найдут ваш сайтмап и перейдут по всем его ссылкам.

Однако, для ускорения посещения файла Sitemap поисковыми ботами необходимо выполнить несколько шагов:

• разместить ссылку на карту сайта в файле «robots.txt»
• добавить ссылку на «sitemap.xml» в панели вебмастера Яндекс и Google

Ссылка на сайтмап в «robots.txt»

User-agent: *
...
Sitemap: https://site.ru/sitemap.xml

Добавление сайтмап в панели вебмастера Яндекс и Google

Использование кириллических адресов

Для корректной интерпретации URL различными поисковыми системами рекомендуется все кириллические URL кодировать в формат Punycode (бесплатный конвертер) и использовать маскирование для кириллических адресов страниц.

То есть, вместо адреса:

http://www.ёэлектроника.рф/каталог/лампы/

Необходимо использовать кодированный URL:

http://www.xn--80ajjhbcqhrt1jzb.xn--p1a/%D0%BA%D0%B0%D1%82%D0%B0%D0%BB%D0%BE%D0%B3/

Вопрос необходимости карты сайта

Бесспорно, что присутствие карты сайта желательно на любом сайте. Но, с одной стороны, в сайтмапе нет острой необходимости, так как со временем поисковый робот перейдет на ваш сайт и по ссылкам просканирует все доступные ему страницы. С другой стороны, для сайтов, у которых контент обновляется часто и которым важен порядок и приоритет обхода страниц (СМИ, новостные агентства, etc.), данный файл будет жизненно необходим, так как с помощью него они смогут указать поисковым роботам какие страницы индексировать в первую очередь, а какие после.

Поэтому, возникает справедливый вопрос: а так ли необходим Sitemap.xml конкретно для вашего сайта? Давайте разбираться.

Безусловно, данный файл будет актуален для сайтов объемом от 1000 страниц, а также для тех сайтов, объем страниц которых растет быстро и контент на которых нуждается в частой переиндексации, поэтому за счет данного файла поисковая система будет иметь под рукой всегда актуальный список страниц вашего сайта и с помощью него же будет своевременно индексировать все изменения. Таким образом, актуален данный файл для сайтов, контент на которых меняется часто и большими объемами (добавилось 50 страниц, удалилось 40, обновилось 175 и т.д.):

• СМИ, новостные порталы
• интернет-порталы
• каталоги товаров, агрегаторы
• интернет магазины
• форумы, отзовики, сайты вопросов-ответов

Для подобных сайтов данный файл необходимо иметь в первую очередь, так как от него зависит актуальность представляемой информации в выдаче поисковых систем.

Пример индексации через сайтмап при добавлении на сайт большого числа страниц:

Примечание: файлы Sitemap в таком случае необходимо генерировать на стороне сервера. Генерация карты сайта онлайн при помощи сервисов либо программ для ПК бессмысленна за счет низкой скорости и трудоемкости работ по выкладыванию данных файл на сервер (для крупных порталов, каталогов и интернет-магазинов подобные файлы должны обновляться чуть ли не каждый час (например, обновление цен в интернет-магазине)).

Вторая категория сайтов, для которых также необходим данный файл – это сайты от 100 до 1000 страниц и представляющие услуги бизнеса, а также просто информационные странички:

• сайты по продаже товаров и услуг
• сайты компаний и представительств
• блоги

На подобных сайтах обычно приток новых страниц происходит плавно, удаление страниц и разделов случается еще реже. Поэтому само собой подобные сайты должны иметь файлы Sitemap XML, однако в данном случае данный файл больше важен для первичной индексации сайта (чтобы за один обход файла поисковый робот узнал про все страницы сайта и оперативно их проиндексировал). Далее, новые страницы в виду их единичного добавления можно отсылать на переиндексацию даже через панель вебмастера Яндекса или Google и таким образом поддерживать актуальность страниц для поисковых систем. Файлы Sitemap для подобного рода сайтов можно генерировать специальными программами и сервисами, о которых будет написано ниже.

Третья категория сайтов – сайты с числом страниц до 100. К ним относятся:

• лендинги (одностраничные сайты для продажи конкретного товара либо услуги)
• промо-сайты (например, сайты коттеджных поселков)
• сайты-визитки
• домашние странички

Все эти сайты зачастую содержат небольшое число страниц о какой-то одной услуге, товаре, событии. Для подобного рода сайтов в наличии Sitemap нет какой-то жизненно важной необходимости. Так как контент на них обновляется достаточно редко и новые страницы добавляются с низкой интенсивностью, поисковые роботы такие сайты обходят не часто в виду малого числа страниц на них, поэтому для данных сайтов вполне подойдет как использование Sitemap.xml, так и его предшественника HTML карты сайта – это обычная HTML-страница стилизованная под дизайн сайта, на которой размещены все ссылки на внутренние страницы сайта в иерархическом виде (обычно в виде дерева). Таким образом, поисковый робот, посетив эту страницу, может обойти все страницы сайта и проиндексировать их либо обновить о них информацию. Пример такой страницы:

Примечание: на текущий момент создание подобных страниц перестало быть актуальным в виду перехода на формат XML, который не нужно создавать руками, а можно сгенерировать специальными программами либо сервисами (их примеры представлены ниже).

Таким образом, из всех вышеизложенных заключений можно сделать простой вывод, что чем больше объем страниц вашего сайта и чем чаще он обновляется, тем острее необходимость наличия на нем карты сайта Sitemap.xml, который в идеале должен генерироваться на сервере автоматически, без участия человека.

Важно!
Сайтмап должен включать в себя только актуальные страницы сайта необходимые для индексации и отдающие код ответа сервера 200. Все прочие служебные, технические либо страницы, запрещенные к индексации, не должны присутствовать в карте сайта.

Варианты генерации Sitemap.xml

Существует несколько методов генерации, перечислим их:

1. Генерация карты сайта при помощи онлайн-генератора (стоит учесть, что зачастую подобные генераторы платные)

В сети достаточно сервисов для генерации карты сайта, однако у них есть некоторые ограничения:

• обычно в подобных сервисах бесплатно можно сгенерировать не более 500 страниц
• для больших сайтов (от 5000 страниц) генерация может занять продолжительное время
• генерация сайтмап для крупных порталов может и вовсе произойти с ошибкой из-за нехватки ресурсов сервера, на котором расположен данный сервис

Пример онлайн-генератора MySitemapGenerator.com:

Примечание: Недостаток данного метода состоит в том, что при каждом обновлении сайта необходимо вручную генерировать сайтмап и заливать на сервер.

2. Автоматическая генерация Sitemap.xml средствами CMS (например в Bitrix, WordPress, Opencart и прочих системах управления сайтом доступна такая функция)

Наиболее приоритетный вариант, который позволяет настроить частоту обновления Sitemap средствами системы управления сайтом и избавляет вебмастера от ручного размещений сайтмап на сайте.

Пример модуля генерации Sitemap.xml для CMS Opencart:

3. Генерация карты сайта при помощи программы для ПК

Данный вариант подойдет для сайтов небольших и средних размеров, контент на которых обновляется периодически.

Недостатки подобного метода:

• после генерации сайтмап необходимо заливать его на сервер вручную
• большинство подобных программ-краулеров для ПК платные

Пример генерации Sitemap.xml при помощи бесплатной программы SiteAnalyzer:

• скачиваем дистрибутив программы
• после запуска программы вводим URL сайта и запускаем сканирование
• после сканирования в главном меню выбираем пункт Проекты -> Генерировать Sitemap

• в результате получаем карту сайта (одним файлом либо из нескольких файлов, если число страниц превышает 50 000)

• заливаем сайтмап в корень вашего сайта по FTP протоколу

4. Ручное создание сайтмап

Ручное создание возможно для сайтов с числом страниц до 10, однако для ускорения процесса проще воспользоваться любым онлайн-генератором либо программой для ПК.

Резюмируя все вышеописанное можно выделить основные моменты, на которые нужно обратить внимание при генерации карты сайта:

• для ресурсов с часто обновляемым контентом карта сайта должна генерироваться на стороне сервера
• sitemap.xml должен содержать только актуальные страницы сайта, отдающие код ответа сервера 200 и разрешенные к индексации
• для качественной индексации ресурса карта сайта должна обновляться каждый раз при обновлении контента на сайте

На этом все!
Благодарю за внимание и до новых встреч! 🙂

Полезное

Сервисы для проверки корректности карты сайта:

• Яндекс Вебмастер: https://webmaster.yandex.ru/tools/sitemap/
• Google Вебмастер: https://www. google.com/webmasters/ (Ваш сайт -> Сканирование -> Файлы Sitemap -> Добавление/проверка файла Sitemap)

Ссылки на описание Sitemap:

• Справка Яндекса: https://yandex.ru/support/webmaster/controlling-robot/sitemap.html
• Справка Google: https://support.google.com/webmasters/answer/183668
• Описание протокола на русском: https://www.sitemaps.org/ru/protocol.html

Оцените статью

4.7/5

9

Другие статьи:

• 18 этапов проверки сайта перед покупкой
• Актуальные способы продвижения сайтов ссылками в 2018 году
• Быстрый тест скорости загрузки страниц сайта

0 комментариев

Чтобы оставить комментарий необходимо авторизоваться.

<< Назад

что такое карта сайта в XML-формате

Оглавление

1. org/ListItem»> Для чего используется карта сайта
2. Виды карт сайта
3. Что входит в sitemap.xml
4. Как формируется sitemap.xml больших сайтов
5. Способы создания карт сайта
6. org/ListItem»> Что делать после создания карты
7. О чём стоит помнить

XML-карта сайта

sitemap.xml

Sitemap.xml — это так называемая карта сайта, файл, который содержит в себе ссылки на все важные страницы ресурса. Ближайший его аналог — книжное оглавление: карта позволяет легко ориентироваться по структуре. Сайтмап в несколько раз увеличивает скорость индексации страниц поисковыми системами. Поэтому карта в XML или одном из других форматов — обязательное условие успешного поискового продвижения. В SEO генерация sitemap.xml — одно из базовых действий в самом начале работ.

Для чего используется карта сайта

Работа поисковиков. Чтобы понять, зачем нужен сайтмап, надо знать, как работают поисковые роботы. Они обходят интернет-ресурсы, анализируют информацию на них и заносят в базу, чтобы впоследствии поисковик мог легко выдать ответ на любой запрос, сверившись с этой базой. Это называется индексация. Если содержимое сайта меняется или появляется новая страница, поисковая система узнаёт об этом не сразу, а только после того, как робот обойдёт ресурс заново.

Как помогает sitemap. Робот обходит сайт последовательно, начиная с главной страницы, переходя от одного уровня вложенности к другому. Чем глубже в структуре сайта находится страница, тем больше времени займёт её индексация. А если вложенность большая, есть вероятность, что поисковая программа не доберётся до странички месяцами. Чтобы сориентировать робота, создаётся карта сайта XML: она содержит информацию обо всех важных страницах и не заставляет его тратить лишнее время. В результате программа быстрее индексирует все страницы, не расходуя ресурсы на переходы вглубь сайта. Впрочем, карты тоже бывают разные: некоторые рассчитаны скорее на людей, другие — на программы поисковиков.

Виды карт сайта

Чтобы не допустить путаницы, нужно сразу отделить одно от другого. Файл, служащий «оглавлением» для пользователей, и файл, который использует робот для индексации, — это разные карты. Они различаются форматом, структурой, особенностями размещения, и оптимальный вариант — иметь на своём сайте обе.

HTML. HTML-сайтмап — это обычно ещё одна страница, которая, по сути, представляет собой содержание остальных. Её видно пользователям: обычно ссылка на карту находится на главной странице или в основном разделе. На страничке список URL на все основные разделы и подразделы, структура обычно древовидная, чтобы человеку было легче ориентироваться.

• Для этого вида карты существуют ограничения по количеству ссылок. Большое количество URL, пусть даже внутренних, понижает страничку, а вместе с ней и весь сайт в поисковой выдаче. Поэтому не рекомендуется указывать в карте более ста линков. Если сайт большой, HTML-сайтмапов может быть несколько. Некоторые используют для лучшего отображения карты JavaScript-код или стили CSS.
• Цель HTML-страницы — помочь пользователям, поисковые роботы её практически никак не воспринимают. Поэтому её делают в первую очередь наглядной и понятной человеку.

XML. В отличие от предыдущего этот вид используется поисковыми роботами. Карта sitemap.xml — это файл с соответствующим расширением, который располагается в корне сайта. Он составляется по определённому шаблону и содержит в себе до 50 000 ссылок, ведущих на разные страницы ресурса.

• В содержимое файла входят не только сами URL, но и их приоритет и желаемая частота переиндексации. Конечно, этот показатель довольно условный: если указать нереалистичные сроки, робот не будет их соблюдать. Но помочь более часто индексировать релевантные страницы и подолгу игнорировать те, что обновляются редко, может.
• Название sitemap.xml и формат отображения информации стандартные, их распознают все популярные поисковые системы. Синтаксис содержимого строится по определённым правилам: стандартизация — обязательное условие для файла, с которым работают машины.

TXT. Этот тип встречается нечасто, в основном на небольших сайтах. Это карта, созданная не в формате XML, а в текстовом формате TXT, то есть в виде обычного текстового документа. Сложной структуры и собственного синтаксиса у такого сайтмапа нет, он не даёт возможности указать приоритет страницы и частоту обхода. Sitemap.txt — это просто построчный список URL всех страничек ресурса без какой-либо дополнительной информации. Он также может включать до 50 000 ссылок. Его называют картой сайта для ленивых. В большинстве случаев использование такого простого решения не оправдано, лучше использовать предыдущий вариант: у него намного шире возможности.

Что входит в sitemap.xml

Синтаксис карты сайта подразумевает использование XML-синтаксиса: содержимое должно быть описано с его помощью. Принцип написания такой же, как при вёрстке HTML: <имя тега>содержимое</имя тега>. Используемая кодировка — непременно UTF-8, в первой строчке сайтмапа находится указание на это.

Первая строчка карты сайта

Указание на используемую кодировку текстаПервая строчка карты сайта

Дальше следуют обязательные и необязательные элементы синтаксиса, каждый из которых отвечает за отдельный параметр.

Обязательные. Теги, которые должны быть в каждой карте сайта sitemap.xml, включают в себя:

<urlset>. Это основной, так называемый родительский тег. Всё остальное содержимое файла обрамлено им. Внутри содержится строчка, указывающая, что используется пространство имён XML;

Родительский тег

в sitemap.xml» border=»0″ alt=»Так выглядит основной тег и указание на использование пространства имён» />

• <url>. Один из главных тегов. В него заключают сведения об одной конкретной ссылке, включающие в себя сам линк и информацию о нём. Приоритет, частота обновления — всё, что относится к одной конкретной странице, обрамляется отдельным <url></url>;
• <loc>. Внутри этого тега содержится сама ссылка на страницу и больше ничего.

Необязательные. В sitemap.xml может находиться больше информации, чем просто список линков. Использовать эту возможность необязательно, но желательно: она помогает проставить приоритеты индексации и оптимизировать обход страниц поисковыми роботами. Для необязательных сведений имеются собственные теги:

• <lastmod>. В него обрамляется дата последнего изменения странички, что позволяет поисковику сориентироваться, нужно ли обходить её заново;
• <changefreq>. Внутри тега находятся сведения о том, как часто обновляется страница. Возможные значения: always, hourly, daily, weekly, monthly, yearly, never, то есть постоянно, ежечасно, ежедневно, еженедельно, раз в месяц, раз в год, никогда;
• <priority>. Указывает на приоритет странички. Внутри содержится число от 0,1 до 1, где 0,1 — очень низкий приоритет, 1 — максимально высокий. Он подсчитывается относительно других страниц, так что выставлять везде одинаковое значение не имеет смысла.

Все эти теги, как и обязательный <loc>, находятся внутри блока <url>.

Пример части карты сайта

Полный блок одной ссылки в sitemap.xml

Как формируется sitemap.xml больших сайтов

Одна карта сайта способна вместить в себя до 50 000 адресов, но у крупных ресурсов страниц может быть намного больше. В таком случае формируется несколько сайтмапов. Основная карта, так называемый файл индекса, содержит только ссылки на остальные: sitemap1, sitemap2 и так далее. Уже в этих файлах находятся линки на страницы и информация о них. Вместо <url> в этом случае используется тег <sitemap>, внутрь которого заключаются теги <loc> со ссылками на дочерние карты. Такой же принцип применяют, если вес sitemap.xml превышает 10 Мб.

Пример файла индекса карт сайта

Основной файл карты сайта вмещает в себя ссылки на остальные

Способы создания карт сайта

Разобравшись, что это такое и как описывается, можно перейти к созданию sitemap. Описывать, как создавать HTML и TXT-карту, смысла нет: в первом случае составление аналогично обычной вёрстке страницы, во втором достаточно выгрузить список URL и сохранить в текстовый файл. Подробно стоит остановиться только на файле карты XML. Составить его можно несколькими способами.

Вручную. Вариант подходит для небольших самописных ресурсов. Для любого более-менее крупного сервиса составлять сайтмап вручную — долгий и неблагодарный труд.

Через CMS. Большинство популярных административных панелей имеет встроенные средства создания sitemap или генерирует её автоматически. Конкретный алгоритм действий зависит от используемой CMS и может сильно отличаться.

С помощью сторонних сервисов. Если в админпанели функции генерации карты нет, можно воспользоваться одной из многочисленных программ. Существуют как онлайн-генераторы, так и программные продукты для скачивания или плагины для CMS. Некоторые сервисы платные или имеют ограничения: например, не могут создавать sitemap, включающий более 500 URL. В них можно настраивать параметры и приоритеты для разных страниц.

Что делать после создания карты

Процесс генерации sitemap обычно несложен и занимает мало времени. Главное — правильно указать приоритеты страниц и частоту их обновления. От этих параметров зависит частота индексации. Но с созданием карты работа не заканчивается:

• sitemap.xml находится в корне сайта, и поисковые системы обычно находят файл самостоятельно. Но, чтобы ускорить этот процесс, рекомендуется размещать ссылку на карту в вебмастерских панелях Яндекса и Google;
• альтернативное решение — разместить ссылку на sitemap в файле robots.txt, который сообщает поисковым роботам, какие части сайта индексировать, а какие нет. Это делается в одну строчку с помощью отдельной директивы.

Директива Sitemap в robots.txt

Указание на карту сайта в файле для поисковых роботов

После размещения ссылки в файле robots.txt карта сайта должна автоматически появиться в вебмастерской панели. Если этого не произошло, придётся добавить её вручную.

О чём стоит помнить

Создание карты сайта — процесс несложный, но ответственный. Правильно указанные интервалы, отсутствие лишних URL (ссылок на технические файлы, неканонических или неиндексируемых линков), выставленные приоритеты — всё это помогает продвижению и грамотной индексации в поисковиках. Ошибки же, наоборот, способны ухудшить позиции в выдаче. Будьте внимательны и ответственно подходите к тому, какие ссылки размещать в карте сайта.

Что такое XML Sitemap? Как создать карту сайта (с примерами)

XML-карты сайта — одна из самых непонятных составляющих SEO-уравнения.

Я встречал оптимизаторов, которые не могли объяснить, зачем они нужны, не говоря уже о том, как их настроить «правильно».

Вот в чем загвоздка:

Точно так же, как карта необходима для нахождения пункта назначения по дороге, XML-карта сайта имеет решающее значение для поисковых систем для определения URL-адресов вашего веб-сайта.

Если ваши URL-адреса не будут просканированы, они не будут проиндексированы, и ваши страницы (конечно) не будут ранжироваться без индексации.

Короче говоря, XML-карты сайта играют решающую роль в поисковой оптимизации.

В сегодняшней статье я покажу вам, как создать XML-карту сайта с нуля и шаг за шагом идеально оптимизировать ее для SEO. Я расскажу:

• Что такое XML-карта сайта
• XML и карты сайта HTML
• XML-теги карты сайта (и какие из них следует использовать)
• Примеры XML-карты сайта
• Зачем нужна карта сайта XML
• Как создать XML-карту сайта
• Шесть рекомендаций по созданию файла sitemap.xml

Без лишних слов, давайте перейдем к делу.

Что такое XML Sitemap? (И почему, черт возьми, это должно вас волновать)

Проще говоря:

XML-карта сайта — это дорожная карта для поисковых систем.

В нем перечислены важные материалы вашего веб-сайта в формате XML, чтобы поисковые системы могли легко находить и индексировать ваш контент и в конечном итоге отображать его на страницах результатов поиска.

Вы должны указать в своей XML-карте сайта любую веб-страницу (или файл), которую вы хотите отображать в поисковых системах.

Почему?

Потому что карта сайта обеспечивает возможность обнаружения вашего контента.

Допустим, у вас есть веб-страницы, на которые нет ссылок ни на вашем сайте, ни в Интернете в целом. Если эти страницы не имеют гиперссылок, указывающих на них, поисковые роботы не смогут их найти.

XML-карта сайта (отправляемая поисковым системам) гарантирует, что поисковые системы смогут найти любые страницы, которые вы хотите включить в поисковую выдачу.

Но это еще не все.

Вы можете использовать XML-карту сайта для предоставления дополнительной информации поисковым системам, например, когда ваш контент последний раз обновлялся и какие страницы имеют более высокий приоритет. Подробнее об этом позже.

XML и HTML карты сайта — в чем разница?

Вы можете добавить на свой сайт два типа карты сайта; карта сайта в формате XML и карта сайта в формате HTML.

• Карты сайта XML используют расширяемый язык разметки (XML)
• Карты сайта HTML используют язык гипертекстовой разметки (HTML)

Но помимо кода, который они используют, они также выполняют различные функции:

1 с примером XML-карты сайта:

Как видите, XML-карта сайта неудобна для человека.

Карты сайта в формате XML — это фиды, специально предназначенные для поисковых систем.

Они помогают поисковым системам, таким как Google, понять, какие URL сканировать и какие из них имеют приоритет.

Кроме того, как часто меняются эти URL-адреса и какие новые добавляются на сайт.

Эта информация помогает планировщикам поисковых систем лучше оценивать, когда и как часто следует повторно сканировать конкретный URL-адрес.

Карта сайта в формате HTML

Вот пример карты сайта в формате HTML:

Она сильно отличается от карты сайта в формате XML.

Это потому, что эта веб-страница предназначена как для людей, так и для роботов.

Карта сайта в формате HTML облегчает навигацию по веб-сайту.

С точки зрения поисковой системы, карта сайта в формате HTML является полезным инструментом для обнаружения URL-адресов (при условии, что карта сайта сканируется и ссылки, содержащиеся в карте сайта, переходят).

Но это не единственная их ценность для SEO:

Карты сайта в формате HTML также распределяют PageRank по всему веб-сайту.

Поскольку карты сайта в формате HTML обычно связываются с каждой страницы сайта (через навигационную ссылку в нижнем колонтитуле), они имеют огромное количество PageRank.

Это означает, что они могут передать массу своего входящего PageRank другим страницам веб-сайта через внутренние ссылки.

Есть страница с плохим рейтингом?

Добавьте эту страницу в карту сайта HTML.

Это может быть быстрый и простой способ повысить рейтинг.

Как выглядит карта сайта в формате XML?

Как я уже говорил, карты сайта в формате XML предназначены для поисковых систем, а не для людей.

Они, безусловно, могут показаться запутанными, если вы никогда раньше с ними не сталкивались:

 

<ссылка>
https://seosherpa.com/
2022-01-26T19:12:36+09:00
                Ежедневно
                <приоритет>1

<ссылка>
https://seosherpa.com/services/
<последний мод>2021-11-16T13:21:20+09:00
                Ежедневно
                <приоритет>0,8

 

Однако, если вы знаете, что означает каждый из этих компонентов:

• Объявление XML
• Набор URL-адресов
• URL-адрес
• Последнее изменение
• Приоритет
• Частота изменений XML-карты сайта

Давайте разберем каждый из них:

Декларация XML

Проще говоря, объявление XML сообщает поисковым системам, что они читают файл XML.

В объявлении XML также указывается версия XML и используемая кодировка символов.

• Версия должна быть 1.0
• Кодировка должна быть UTF-8.

Поместите объявление XML в начало файла sitemap.xml.

Набор URL-адресов

Набор URL-адресов представляет собой контейнер для всех URL-адресов в карте сайта.

Он начинается с указания стандарта протокола, который использует sitemap.xml:

Вы заметите протокол, упомянутый в пример выше — стандарт 0,9.

Google, Yahoo и Microsoft поддерживают этот стандарт карты сайта — я рекомендую вам его использовать.

Важно отметить, что urlset закрывается внизу документа XML:

Этот короткий фрагмент кода сообщает поисковым системам, что набор URL закончился.

URL-адрес

Тег является родительским тегом для каждого URL-адреса в карте сайта XML:

 
https://seosherpa. com/services/
 

Между открывающим и закрывающим необходимо указать расположение URL во вложенном теге  .

Здесь важно указать абсолютный URL-адрес, включая протокол HTTP:// или HTTPS://.

Другими словами, укажите URL точно так, как он будет отображаться в веб-браузере.

С другой стороны, относительные URL-адреса, такие как /services/, не будут распознаваться.

Адрес URL — это единственный атрибут, который ДОЛЖЕН указываться между тегами URL.

Но с учетом сказанного, есть еще три (необязательных) свойства, которые могут быть включены:

Последнее изменение

Тег определяет, когда содержимое этого URL-адреса было изменено в последний раз.

 2022-01-26T19:12:36+09:00 

Допустим, вы обновили сообщение в блоге 10 января 2022 года; атрибут будет читаться как 2022-01-10.

Сообщает поисковым системам, когда содержимое этого URL-адреса было в последний раз изменено, что теоретически влияет на повторное сканирование этой страницы поисковой системой.

Можно также указать время, но это необязательно.

Независимо от того, включаете ли вы только дату или время, обязательно используйте формат «дата-время W3C».

Это единственный формат, распознаваемый для тега в файле sitemap.xml.

Приоритет

Тег указывает приоритет URL-адреса по отношению ко всем другим URL-адресам на веб-сайте.

 0.8 

Другими словами, он позволяет указать поисковым системам, какие URL-адреса должны иметь приоритет при выделении краулингового бюджета для вашего сайта.

Значения приоритета могут быть установлены от 0,0 (наименьший приоритет) до 1,0 (максимальный).

Проблема в том, что Google игнорирует в картах сайта XML, потому что, по словам Гэри Иллиса, «это мешок шума».

мы их игнорируем. По сути, это мешок шума

— Гэри 鯨理／경리 Illyes (@methode) 28 марта 2017 г.

Так что на самом деле вообще нет смысла устанавливать приоритет.

Частота изменений

Принимая во внимание, что тег определяет, когда содержимое этого URL-адреса было изменено в последний раз…

Тег указывает, как часто содержимое скорее всего поменять.

 Ежедневно 

Его цель — дать поисковым системам некоторое представление о том, как часто они могут повторно сканировать URL-адрес.

Частота изменения в xml Sitemap может быть установлена ​​на любое из следующих значений:

• Всегда
• часовые
• Ежедневная
• Еженедельные
• ежемесячно
• год
• Никогда

 

<ссылка>
https://seosherpa.com/
2022-01-26
        
<ссылка>
https://seosherpa.com/services/
2021-11-16