Содержание
Формат поддерживаемый Яндексом

ТХТ
Используйте этот формат, чтобы сообщить только об адресах страниц.
Пример:
https://www.example.com/page1.html
https://www.example.com/page2.html
Добавление URL-адреса в sitemap-файл вовсе не является гарантией того, что этот URL-адрес будет просмотрен пауком или проиндексирован. Однако с его помощью можно просмотреть и проиндексировать те страницы, которые иначе не обнаруживаются и не индексируются.
Эта программа является дополнением (а не заменой) к обычному просмотру ссылок поисковым движком. Преимущества sitemap-файлов в следующем:
для страниц, о которых поисковые движки уже знают (вследствие регулярного их просмотра), используются предоставляемые вами метаданные, такие как дата последней модификации контента (lastmod date), частота изменений страницы (changefreq);
для страниц, о которых движки не знают, используются предоставляемые вами дополнительные URL-адреса (для улучшения охвата просмотром);
для тех URL-адресов, которые, возможно, имеют дубликаты, движки могут использовать данные sitemap-файлов для выбора канонической версии;
верификация/регистрация sitemap-файлов может означать позитивный сигнал доверия/авторитета;
sitemap-файлы могут оказывать позитивное воздействие второго порядка — например, улучшать рейтинги или повышать популярность внутренних ссылок;
Формат поддерживаемый Google
добавив sitemap-файл в Search Console, вы получите дополнительные аналитические возможности — например, сможете увидеть, какие URL-адреса недоступны пауку, обнаружить проблемы дублирующегося контента и т. д.
Sitemap-файлы используют простой формат XML, о котором вы можете прочитать по адресу www.sitemaps.org. Sitemap-файл — это полезный, а в некоторых случаях просто необходимый инструмент для вашего веб-сайта. В частности, если у вас есть причина думать, что сайт не проиндексирован полностью, то sitemap-файл может помочь вам увеличить количество проиндексированных страниц. По мере того, как сайты растут в размерах, ценность sitemap-файлов существенно увеличивается (поскольку на включенные в них новые URL-адреса поступает дополнительный трафик).
Для каждого файла Sitemap указывается следующая информация
URL файла Sitemap Точный URL, который указывается при отправке файла Sitemap. Переадресация не выполняется. Здесь показываются только файлы, отправленные с помощью этого отчета или API.
Тип файла Sitemap. Возможные значения:
- Sitemap – текстовый файл или файл в формате XML.
- Файл индекса Sitemap – файл с информацией о других файлах Sitemap.
- RSS – RSS-фид.
- Atom – фид Atom.
- Неизвестно – файл имеет неизвестный формат или ещё не обработан.
Отправлен Дата, когда файл Sitemap был последний раз отправлен в Google.Дата последней обработки Дата, когда файл Sitemap был последний раз обработан инструментами Google. Указывается, только если мы получили файл.Статус последнего сканирования. Возможные значения:
- Успешно – файл Sitemap загружен и обработан без ошибок. Все URL добавлены в очередь на сканирование.
- Обнаружены проблемы – файл Sitemap содержит ошибки, однако все URL, которые удалось из него извлечь, добавлены в очередь на сканирование. Нажмите на файл в таблице, чтобы увидеть список ошибок. Полный список ошибок при обработке приведен ниже.
- Не получено – не удалось получить файл Sitemap.
Мэтт Каттс (Matt Cutts, руководитель команды Google по борьбе с веб-спамом) объяснил протокол Sitemap компании Google следующим образом:
«Представьте себе, что на вашем сайте есть страницы А, Б и В. Мы находим страницы А и Б путем нормального перехода по вашим ссылкам. Затем вы конструируете sitemap-файл и перечисляете в списке страницы Б и В. Теперь появляется шанс, что мы просмотрим и страницу В, но мы этого не обещаем. Мы не выбросим страницу А только потому, что вы не включили ее в ваш sitemap-файл. И само включение в список страницы, о которой мы не знали, тоже не гарантирует того, что мы просмотрим ее. Но если по какой-то причине мы не видим никаких ссылок на В, либо мы знаем о странице В, но ее URL-адрес был отвергнут из-за слишком большого количества параметров или по другой причине, то появляется шанс, что мы просмотрим страницу В».
