Sitemaps

Формат протокола Sitemap состоит из XML-тегов. В файле необходимо использовать кодировку UTF-8.

Ниже приведен пример файла Sitemap, в котором содержится только один URL-адрес и использованы все необязательные теги.

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="https://www.sitemaps.org/schemas/sitemap/0.9">
   <url>
      <loc>http://example.com/</loc>
      <lastmod>2013-11-18</lastmod>
      <changefreq>monthly</changefreq>
      <priority>0.8</priority>
   </url>
</urlset>

Можно предоставить несколько файлов Sitemap, однако в каждом из этих файлов должно быть не более 50000 URL, а размер каждого из этих файлов не должен превышать 50 МБ. При необходимости файл Sitemap можно сжать с помощью архиватора gzip, чтобы его размер не превышал 50 МБ, и тем самым уменьшить требования к пропускной способности канала.
Если необходимо перечислить более 50000 URL, следует создать несколько файлов Sitemap, при этом необходимо перечислить каждый из этих файлов в файле индекса Sitemap (Sitemap index). Формат файла индекса Sitemap похож на формат файла Sitemap.

Подробная информация об использовании файлов индекса Sitemap на официальном сайте: sitemaps.org.

• Канал синдикации (RSS 2.0, а также Atom 0.3 или 1.0)
• Текстовый файл (в текстовом файле в каждой строке должен быть только один URL)

Рекомендуется располагать файл Sitemap в корневом каталоге сервера, чтобы ссылка выглядела примерно так: http://example.com/sitemap.xml Архивировано 25 января 2012 года..

• Все ссылки, перечисленные в файле Sitemap, должны находиться в том же домене, что и сам Sitemap.

  Например, если файл Sitemap находится по адресу http://www.example.com/sitemap.xml Архивировано 25 января 2012 года., то он не может включать в себя ссылки страниц с доменов http://subdomain.example.com(недоступная+ссылка) или http://example.com.

• Ссылки в файле Sitemap должны указывать на страницы, находящиеся в том же каталоге (или его подкаталогах), что и сам файл Sitemap.

  Например, если файл Sitemap находится на http://www.example.com/catalog/sitemap.xml (недоступная+ссылка), то он не может включать в себя ссылки на страницы http://www.example.com/page.html (недоступная+ссылка) или http://www.example.com/dir/page.html (недоступная+ссылка).

• Ссылки, указанные в файле Sitemap, должны использовать тот же протокол (например, HTTP), по которому доступен файл Sitemap.

  Это значит, что если файл Sitemap находится на http://www.example.com/sitemap.xml Архивировано 25 января 2012 года., то он не может содержать ссылки типа https://www.example.com/page.html (недоступная+ссылка) и ftp://www.example.com/file.doc (недоступная+ссылка).

Для определения элементов и атрибутов, которые могут появляться в файлах Sitemap, используются следующие XML-схемы:

• Для файлов Sitemap: https://www.sitemaps.org/schemas/sitemap/0.9/sitemap.xsd
• Для файлов индекса Sitemap: https://www.sitemaps.org/schemas/sitemap/0.9/siteindex.xsd

После того, как файл Sitemap создан и размещен на веб-сервере, необходимо сообщить о местонахождении этого файла поисковым системам, поддерживающим этот протокол. Это можно сделать следующим образом:

• с помощью интерфейса поисковой системы
• указав местоположение файла Sitemap в файле robots.txt
• выслав HTTP-запрос

Затем поисковые системы смогут извлечь файл Sitemap и разрешить своим сканерам доступ к URL-адресам.

Sitemap: <sitemap_location>

• Официальный сайт (рус.) (создан при поддержке Google, Yahoo, Microsoft)
• О файлах sitemaps в центре веб-мастеров Google
• О файлах Sitemap в Яндекс.Вебмастере
• Валидатор файлов Sitemap Яндекса
• Sitemap в Google Code  (англ.)
• SimpleSitemapGenerator (бесплатная программа для генерации sitemap-файлов)