Списки URL

ID статьи: 2800
Последнее обновление: 27 фев, 2026
Product: SWG
Version: 7.5.x

Списки URL используются в правилах контентной фильтрации в качестве черных и белых списков.

Компания UserGate предоставляет ряд собственных обновляемых списков. Для использования этих списков необходима соответствующая лицензия. Подробнее о лицензировании UserGate SWG — в разделе «Лицензирование».

Наименование списка

Описание

Список поисковых систем без безопасного поиска

Список известных поисковых систем, на которых отсутствует возможность блокировки поисковых запросов взрослого содержания. Рекомендуется блокировать такие поисковики для целей родительского контроля

Соответствие списку запрещенных URL Министерства Юстиции РФ

Список содержит URL, запрещенные Министерством Юстиции Российской Федерации

Соответствие списку запрещенных URL Республики Казахстан

Единый реестр доменных имен, указателей страниц сайтов в сети интернет и сетевых адресов, содержащих информацию, распространение которой запрещено в Республике Казахстан

Список образовательных учреждений

Список доменных имен образовательных учреждений РФ

Список фишинговых сайтов

Список содержит URL фишинговых сайтов

Соответствие реестру запрещенных сайтов Роскомнадзора (URL)

Единый реестр указателей страниц сайтов в сети интернет, содержащих информацию, распространение которой в Российской Федерации запрещено. Список доступен по ссылке

Соответствие реестру запрещенных сайтов Роскомнадзора (домены)

Единый реестр доменных имен, содержащих информацию, распространение которой в Российской Федерации запрещено. Список доступен по ссылке

Вы также можете создать собственные списки URL в веб-консоли или в интерфейсе командной строки UserGate SWG. 

Для создания списка в веб-консоли:

1. В разделе Настройки ➜ Библиотеки ➜ Списки URL нажмите Добавить и задайте название и описание нового списка.

2. Выберите тип списка (локальный или обновляемый). Для обновляемого списка укажите URL обновления и настройте расписание скачивания обновлений.

3. Установите категорию создаваемого списка в поле Чувствительность к регистру:

  • Чувствительный к регистру — список URL-адресов, чувствительных к регистру букв в адресе.

  • Нечувствительный к регистру — список URL-адресов, нечувствительных к регистру букв в адресе. Использование списка этой категории исключает необходимость перебора вариантов написания одного и того же выражения с буквами в различных регистрах.

  • Домен — список адресов доменов. При добавлении в этот список записи вида http://test.ru, она будет преобразована в запись вида test.ru.

Важно!Категория списка задается при его создании. Изменить категорию после создания списка нельзя.
ПримечаниеПри использовании URL-списка ищется весь URL запроса; при использовании доменного списка — только имя узла. При сохранении URL в доменный список в процессе преобразования из него удаляется все лишнее, остается только имя узла.

4. Добавьте необходимые записи в новый список.

В списках можно использовать специальные символы:

  • * — любое количество любых символов;

  • ^ — начало строки;

  • $ — конец строки.

Правило фильтрации контента может содержать один или несколько списков. Подробнее — в разделе «Фильтрация контента».

Внимание! Спецсимволы не работают в списках исключений для блокировки рекламы. Не рекомендуется использовать спецсимволы в записях таких списков.

Если необходимо заблокировать строго определенный адрес, используйте символы начала (^) и конца ($) строки. Например:

^http://domain.com/exacturl$

Если необходимо заблокировать адрес и все страницы внутри него, используйте символ ^ в начале строки, без символа $ в конце. Например:

^http://domain.com/exacturl/

Чтобы заблокировать домен со всеми возможными URL, укажите только имя домена без специальных символов:

domain.com

Примеры интерпретации URL-записей приведены в таблице.

Пример записи

Обработка DNS- запросов

Обработка HTTP-запросов для списка доменов

Обработка HTTP-запросов для списков URL, чувствительных к регистру

Обработка HTTP-запросов для списков URL, нечувствительных к регистру

yahoo.com

или

*yahoo.com*

Блокируется весь домен и домены более высоких (3,4 и т.д.) уровней, например:

sport.yahoo.com;

mail.yahoo.com;

а также:

qweryahoo.com

Блокируется весь домен и все URL этого домена, а также домены более высоких (3,4 и т.д.) уровней, например:

http://sport.yahoo.com;

http://mail.yahoo.com;

https://mail.yahoo.com;

http://sport.yahoo.com/123;

http://qwertyahoo.com/

Блокируются любые вхождения yahoo.com:

http://sport.yahoo.com;

http://mail.yahoo.com;

https://mail.yahoo.com;

http://sport.yahoo.com/123;

http://qwertyahoo.com/

Не блокируются вхождения типа:

https://ya.ru/YAHoo.cOM

Блокируются любые вхождения yahoo.com:

http://sport.yahoo.com;

http://mail.yahoo.com;

https://mail.yahoo.com;

http://sport.yahoo.com/123;

http://qwertyahoo.com/

https://ya.ru/YAHoo.cOM

^mail.yahoo.com$

Заблокирован только mail.yahoo.com

Заблокированы:

http://mail.yahoo.com;

https://mail.yahoo.com;

а также любые ссылки на этом домене, например:

http://mail.yahoo.com/personal-finance

Т. е., блокируется весь домен mail.yahoo.com и все URL этого домена

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

^mail.yahoo.com/$

Ничего не заблокировано

Заблокированы:

http://mail.yahoo.com;

https://mail.yahoo.com;

и любые ссылки на этом домене, например:

https://mail.yahoo.com/personal-finance

т. к. при преобразовании списка остается только домен, слеш в этом случае удалится и реально в списке будет:

^mail.yahoo.com$

т. е. блокируется весь домен mail.yahoo.com и все URL этого домена

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

^https://finance.yahoo.com/personal-finance/$

Ничего не заблокировано

Заблокированы:

http://finance.yahoo.com;

https//finance.yahoo.com;

и любые ссылки на этом домене, например:

http://finance.yahoo.com/personal-finance/

т.к. после преобразования в списке останется только: ^finance.yahoo.com$

Т. е. блокируется весь домен finance.yahoo.com и все URL этого домена

Заблокируется только запрос https://finance.yahoo.com/personal-finance/

Не заблокируется:

http://finance.yahoo.com/personal-finance/

и любое изменение регистра букв в URL:

https://finance.yahoo.com/personal-financE/

Заблокируется только запрос https://finance.yahoo.com/personal-finance/

и любое изменение регистра букв в URL:

https://finance.yahoo.com/Personal-financE/.

Не заблокируется:

http://finance.yahoo.com/personal-finance/

^yahoo.com/12345/

Ничего не заблокировано

Заблокированы:

http://yahoo.com/12345/whatever/;

https://yahoo.com/12345/whatever/;

т.к. после преобразования в списке будет:

^yahoo.com

Т. е. заблокируется домен yahoo.com и все URL этого домена

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

Ничего не заблокируется, поскольку URL должен начинаться с указания протокола

Администратор имеет возможность создавать собственные обновляемые списки и централизованно распространять их на все узлы UserGate SWG. Для создания таких списков выполните следующие действия:

1.  Создайте текстовый файл (например, list.txt) со списком URL в следующем формате:

www.site1.com/url1
www.site2.com/url2
...
www.siteend.com/urlN

2. Создайте архив, содержащий этот файл (например, list.zip).

3. Создайте файл с версией списка (например, version.txt). Внутри файла укажите номер версии списка (например, 3). Необходимо инкрементировать это значение при каждом обновлении списка.

4. Разместите файлы архива и версии (например, list.zip и version.txt) на веб-сервере, чтобы они были доступны для скачивания.

5. На каждом UserGate SWG создайте список URL. При создании укажите тип списка Обновляемый и адрес, откуда необходимо загружать обновления. UserGate SWG будет проверять наличие новой версии на сайте в соответствии с настроенным расписанием скачивания обновлений.

ПримечаниеURL списка задается в формате: http://x.x.x.x/ или ftp://x.x.x.x/.

В свойствах списка можно настроить расписание обновления.

Вы можете выбрать одно из предустановленных значений или указать время вручную в cron-формате: <минуты: 0–59> <часы: 0–23> <дни месяца: 1–31> <месяцы: 1–12> <дни недели: 0–6, где 0 — воскресенье>.

При ручном вводе также можно использовать следующие символы:

  • Звездочка (*) — для выбора всех значений. Например, в поле для ввода часов символ означает, что резервное копирование должно выполняться каждый час.

  • Дефис (-) — для указания диапазона значений.

  • Запятая (,) — в качестве разделителя значений.

  • Косая черта (/) — для указания шага между значениями.

UserGate SWG может проверять чек-сумму файлов обновляемых списков. Для приведенного примера межсетевой экран будет запрашивать файл list.zip.md5, содержащий чек-сумму файла list.zip. Его наличие не обязательно, но если он есть, чек-сумма должна быть корректной.
Получить чек-сумму в Linux можно с помощью команды:

md5sum list.zip

Ее вывод добавляется в файл как хэш list.zip, после чего сохраняется с расширением .md5. Например, содержимое файла list.zip.md5:

04d7d1223ba8ff02396355a2bc3b3d52 list.zip

Эта статья была:   Полезна | Не полезна
ID статьи: 2800
Последнее обновление: 27 фев, 2026
Ревизия: 5
Просмотры: 151
Комментарии: 0