SEO канал Михаила Шакина

27 Oct 2022 19:39

🤖 Фильтруем ботов, краулеров и прочий мусор с помощью CloudFlare

Иван Зимин @heymoneymaker поделился своими наработками.

Таймкоды:
00:00 - Что за боты и зачем их фильтровать?
2:26 - Включаем автоматический редирект с HTTP на HTTPS
2:46 - Начинаем настройку фильтрации
3:04 - Правило 1
7:10 - Правило 2
8:57 - Правило 3
11:40 - Правило 4
12:49 - Правило 5
15:08 - Проверка корректности через системы аналитики
16:34 - Проверка с помощью сервисов
18:08 - Пробуем спарсить сайт краулером
19:30 - Второй этап защиты от ПФ ботов

https://www.youtube.com/watch?v=ucb2Z6QD0jo

Михаил Шакин, @shakinru