Что такое sitemap.xml

Это специальный XML-файл со списком адресов страниц сайта. Он лежит по адресу /sitemap.xml и отдаётся поисковикам, чтобы они знали, какие страницы есть на сайте и когда они менялись.

• В файле перечислены адреса (<loc>) и, если известно, дата последнего изменения (<lastmod>).
• Поисковик читает файл и обходит страницы именно из него, а не по ссылкам из интернета. Так он узнаёт о новых и редко обновляемых страницах, которые иначе мог бы не заметить.
• Адрес файла объявляется в robots.txt строкой Sitemap: — так делает этот сайт.
• <priority> — подсказка о важности страницы: у главной страницы 1.0, у страниц, на которые она ссылается, 0.8, у следующего круга ссылок 0.64 и так далее. Приоритет учитывают не все поисковики, и осмысленнее продвигать качественные страницы, чем писать туда всё подряд.

Этот генератор обходит сайт по ссылкам, начиная с указанного адреса, и собирает sitemap.xml из страниц, которые ответили кодом 200.