Бывают ситуации, когда нам необходимо исключить из сканирования определенного вида url, далее рассмотрим как это сделать.

Как в Screaming Frog исключить из сканирования URL с параметрами

1. Откройте программу Screaming Frog.

2. Перейдите в меню Configuration → Exclude.

   

3. Добавьте новое правило с использованием регулярного выражения:

   .*\/catalog\/korzina\/\?.*

   

   


   Объяснение:

   • .* — любой набор символов перед нужной частью URL,

   • \/catalog\/korzina\/ — путь /catalog/korzina/ (слэши экранируются обратным слэшем),

   • \? — экранированный знак вопроса, обозначающий начало параметров,

   • .* — любые символы после знака вопроса (параметры).

4. Сохраните настройку и запустите сканирование заново.

Так вы исключите из сканирования все URL, начинающиеся с /catalog/korzina/ и содержащие параметры после знака вопроса, например:

• /catalog/korzina/?634470

• /catalog/korzina/?422720

• и т.д.

Если понадобится исключить все URL с параметрами на сайте, можно использовать правило:

Но будьте осторожны — это исключит все URL с параметрами, что может быть нежелательно.