Мониторинг большого количества сайтов
Для большого списка важна не только частота, но и пропускная способность очереди. Web-Puls ограничивает параллельные обращения, учитывает скорость ответов и позволяет подключать дополнительные проверочные узлы.
Почему нельзя запускать все проверки одновременно
Одновременный старт большого списка перегружает сам мониторинг и создает ненужный всплеск запросов к проверяемым сайтам. Медленные ответы дополнительно блокируют очередь и сдвигают следующие запуски.
Планировщик распределяет задания с учетом интервала, лимита параллельности и текущей нагрузки. Недоступный дополнительный узел не должен останавливать остальные проверки.
Управляемая очередь
Проверки одного сайта не накладываются друг на друга, а просроченные задания не размножаются бесконечно.
Разные интервалы
Критичные URL можно проверять чаще, а массовый портфель переводить на часовой или более редкий обход.
Распределенная проверка
Пользовательские серверы подключаются как дополнительные узлы, а Web-Puls остается центральным планировщиком и хранилищем результатов.
От URL до подтвержденного события
-
1
Загрузите список
Массовое добавление принимает домены и назначает им часовой интервал по умолчанию.
-
2
Выделите приоритеты
Сократите интервал только для сайтов, где задержка обнаружения действительно критична.
-
3
Масштабируйте узлы
При росте портфеля подключите свои серверы и распределите нагрузку без переноса данных из Web-Puls.
Сценарии большого объема
- сети сайтов и региональные поддомены
- доменные портфели и массовые лендинги
- агентства с сотнями проектов на поддержке
Частые вопросы
Сколько сайтов можно добавить в один аккаунт?
Базовый лимит массового аккаунта составляет до 1000 сайтов; частые интервалы имеют отдельные ограничения.
Что произойдет, если дополнительный сервер перестанет отвечать?
Узел получит статус offline и перестанет получать новые задания. Остальные узлы и основной планировщик продолжат работу.
Нужно ли всем сайтам ставить одинаковый интервал?
Нет. Частоту стоит выбирать по критичности: минутные проверки оставлять ключевым URL, а массовый портфель проверять реже.
Настройте массовый мониторинг
Добавьте список с часовым интервалом, оцените реальную длительность обхода и только после этого повышайте частоту критичных сайтов.