В настройках сканирования Netpeak Spider на вкладке «Ограничения» можно определять границы сканирования и менять ограничения по ошибкам.
1. Ограничения сканирования
Раздел «Ограничения сканирования» содержит следующие настройки:
- Максимальное количество сканируемых URL.
Иногда сайт бывает настолько массивным, что нет смысла ждать, пока он полностью просканируется, так как основные виды ошибок будут видны почти сразу. C помощью ограничения количества сканируемых URL можно определить объём страниц, достаточный для анализа сайта.
- Максимальная глубина сканирования.
Глубина → это расстояние в кликах от начального URL до анализируемого. С помощью этой настройки можно регулировать, насколько глубоко программа будет сканировать сайт.
- Максимальная вложенность URL.
Вложенность → это количество сегментов в URL у анализируемой страницы. Этот показатель статистический и не зависит от начального URL.
С помощью этой настройки можно регулировать, насколько программа будет углубляться в папки на сайте.
- Максимальное количество редиректов.
Выставленное в этом поле число влияет на несколько параметров:
- сколько редиректов будут учитываться в цепочке (программа будет переходить по ним);
- количество редиректов для определения соответствующей ошибки в боковой панели.
Например, по умолчанию здесь установлено значение «5». Это значит, что программа будет переходить максимум по четырём редиректам, а пятый — считать ошибкой.
Значение «0» для перечисленных параметров означает, что ограничения не заданы.
2. Ограничения в ошибках
Раздел «Ограничения в ошибках» включает в себя ограничения, нарушение которых приведёт к генерации соответствующих отчётов об ошибках в программе. Ошибки определяются автоматически, после окончания или остановки сканирования. Определить ограничения для параметров можно через меню «Анализ».
Длина Title → количество символов в теге <title> от 10 до 70. Если содержимое тега Title страницы будет меньше установленной нижней границы диапазона, программа добавит её в отчёт «Короткий Title», если больше верхней границы диапазона, то в отчёт «Макс.длина Title».
Длина Description → количество символов в содержимом тега <meta name="description" /> от 50 до 320. Отчёты «Короткий description» и «Макс.длина description» генерируются аналогично отчётам для тега Title.
Размер контента → количество символов в содержимом тега <body> от 500 до 50 000. Если размер контента будет меньше установленной нижней границы, программа добавит её в отчёт «Мин. размер контента», если больше установленной верхней границы, то в отчёт «Макс. размер контента».
Максимальная длина H1 → количество символов в заголовке <h1> не более 65. Выход за это ограничение влияет на генерацию отчёта «Макс. длина H1».
Максимальный размер HTML → страницы, содержащие большее количество символов чем установлено попадут в отчёт «Макс. размер HTML».
Максимальная длина URL → длина URL страницы, по умолчанию, не должна превышать 2 000 символов. URL, длиной больше установленного значения попадут в отчёт «Макс. длина URL».
Максимальное время ответа сервера → время ответа сервера, по умолчанию, не должно превышать 500 мс, в противном случае, страница попадёт в отчёт «Большое время ответа сервера».
Максимальное количество внутренних ссылок → страница содержит менее 100 внутренних ссылок, в противном случае, она попадёт в отчёт «Макс. количество внутренних ссылок».
Максимальное количество внешних ссылок → страница содержит менее 10 внешних ссылок, в противном случае, она попадёт в отчёт «Макс. количество внешних ссылок».
Максимальный размер изображения → размер изображения на странице не превышает 100 Кбайт, иначе сгенерируется отчёт «Макс. размер изображения».
Минимальное соотношение text/HTML → соотношение чистого текста (параметр «Размер контента») ко всему контенту на странице (параметр «Размер HTML») более 10%, в противном случае программа сгенерирует отчёт «Мин. соотношение text/HTML».
В Netpeak Spider все заданные по умолчанию ограничения в ошибках, основываются на рекомендациях поисковой системы Google. Вы можете изменить их под свои требования.
Например, увеличить максимальный размер изображения → тогда при запуске нового сканирования ошибка уже будет определяться иначе. Точно также это работает для других ограничений в ошибках.