Начать беседу

Генератор Sitemap

  1. Генератор Sitemap и виды карт сайта.
  2. Работа с инструментом.
  3. Настройки Генератора Sitemap.
  4. Загрузка XML Sitemap на сайт.

1. Генератор Sitemap и виды карт сайта

Генератор Sitemap — встроенный инструмент, позволяющий в несколько кликов генерировать файлы Sitemap на основе рекомендаций Google и Яндекса. 

Netpeak Spider генерирует следующие виды Sitemap:

  • XML Sitemap → стандартный файл Sitemap, который содержит только ссылки на просканированные страницы. Генерируется на основе официальной документации Standard Sitemap Protocol.

  • Image Sitemap → файл, содержащий ссылки на просканированные страницы и ссылки на все уникальные изображения на этих страницах с 200 OK кодом ответа и не закрытые от индексации. Если на странице нет изображений, то ссылка на неё не попадает в Image Sitemap.

    Перед генерацией Image Sitemap убедитесь, что программа учитывает изображения во время краулинга. Для этого перейдите на боковую панель «Параметры» и в группе «Контент» проверьте, выбран ли параметр «Изображения». Также на вкладке «Основные» настроек программы, убедитесь, что включён параметр «Проверять изображения».

  • HTML Sitemap → файл в формате HTML, содержащий ссылки на все страницы сайта. Позволяет встроить карту в соответствующий раздел сайта.

  • TXT Sitemap → текстовая карта сайта с аналогичным списком ссылок на все просканированные страницы сайта: менее популярный, но всё же актуальный способ помочь поисковым системам проиндексировать ваш сайт.


В карту сайта Netpeak Spider добавит URL, которые соответствуют следующим условиям:

  • HTML-файлы с кодом ответа строго 200 OK;
  • Доступ разрешён в файле robots.txt (или в виртуальном robots.txt);
  • Тег Canonical отсутствует или указывает на этот же URL;
  • Meta Refresh отсутствует или указывает на этот же URL;
  • Разрешена индексация в X-Robots-Tag или Meta Robots (index);
  • Разрешён переход по ссылкам в X-Robots-Tag или Meta Robots (follow).

2. Работа с инструментом

Вы можете сгенерировать Sitemap для выбранного поддомена либо сразу для всех — тогда будет сформировано несколько отдельных файлов для каждого из них. Вы также можете настроить сегментацию и создать карту сайта, например, для определённого раздела. 

Обратите внимание: если карта сайта превышает 49,9 Мбайт или содержит более 49 999 URL, Netpeak Spider разделит её на несколько файлов и сгеренирует файл индекса Sitemap.

Чтобы приступить к генерации Sitemap:

1. Просканируйте нужные URL;

2. Откройте инструмент «Генератор Sitemap» с помощью:

2.1. главного меню → «Инструменты»;

2.2. панели управления → «Запустить инструмент»;

2.3. горячих клавиш Alt+G.

генерация sitemap

3. Настройте нужные вам параметры .

4. Нажмите «Сгенерировать...» и выберите путь сохранения файлов Sitemap.

Ниже подробнее о настройках инструмента.

3. Настройки Генератора Sitemap

В поле «Целевой хост для генерации» отображаются хосты из URL в главной таблице. Если к главной таблице применён сегмент, который уменьшает количество хостов, то и в генераторе их будет меньше. 

В генератор Sitemap из основной таблицы передаётся максимум 100 хостов.

настройки генерации sitemap

Для XML Sitemap и Image XML Sitemap вы можете также задать следующие параметры:

  • Дата последнего изменения → параметр «lastmod», который указывает поисковым системам, необходимо ли ещё раз индексировать страницу или контент страницы не изменялся. Параметр можно не указывать, брать из поля «Last-Modified» или задать вручную для всех URL.


  • Частота изменений → параметр «changefreq», который указывает поисковым системам частоту изменений контента на соответствующих страницах. Данный параметр может принимать одно из следующих значений:
    • Постоянно (используется для описания документов, которые меняются при каждом обращении к ним).
    • Каждый час.
    • Ежедневно.
    • Еженедельно.
    • Ежемесячно.
    • Раз в год.
    • Никогда (используется для архивных страниц)


  • Приоритет → параметр «priority», который указывает приоритет (от 0.0 до 1.0) страницы относительно остальных на основе количества её входящих или исходящих ссылок (в зависимости от того, что выбрано). Если этот параметр включён, порядок страниц в карте сайта будет выстроен от наибольшего к наименьшему значению приоритета.


  • Экономия трафика → функция, позволяющая сократить трафик с помощью сжатия файлов в .gz архив и удаления всех пробелов и отступов между тегами. Эта же функция доступна для TXT Sitemap.

html sitemapДля HTML Sitemap:

  • Источник текстовых ссылок → в качестве текста ссылки (анкора) вы можете выбрать URL, тег Title или заголовок H1. Чтобы использовать соответствующие параметры, необходимо включить их в настройках сканирования.


  • Сегментация → функция даёт возможность разбивать весь список страниц на файлы по 100 или 1000 URL в каждом или сохранять всё одним файлом. 


  • Дополнительный контент → позволяет добавлять содержимое Description возле каждой ссылки.

После того, как вы задали настройки Sitemap, нажмите кнопку «Сгенерировать», выберите путь для сохранения папки и нажмите «OK».

сгенерировать карту сайта

В папке будут содержаться файлы с выбранными видами Sitemap. Сортировка внутри файлов идёт согласно сегментации URL → вначале идут страницы с минимальным количеством сегментов.

4. Загрузка XML Sitemap на сайт

После генерации проделайте следующие действия:

  1. Скопируйте файлы из папки «XML Sitemap» в корневую папку сайта на сервере.
  2. Добавьте в файл robots.txt директиву «Sitemap» с адресом загруженной карты сайта.
  3. Проверьте новую карту сайта в инструменте «Валидатор XML Sitemap» Netpeak Spider и отправьте в ping поисковым системам Google и Bing.

отправить карту сайта

Выберите файлы или перетащите файлы
Была ли эта статья Вам полезна?
Да
Нет

Всё ещё думаете?

Тысячи специалистов по всему миру используют Netpeak Spider и Checker. Регистрируйтесь, чтобы начать бесплатный 14-дневный триал!