Логи веб-сервера турагентства в Туле показывали ровно одну странность: с одного IP-адреса каждый день уходило 400-600 запросов на поиск туров с датой вылета через 5-7 месяцев. Живой клиент так не делает. Он смотрит ближайшие даты, максимум следующие школьные каникулы, а тут кто-то методично выкачивал цены на ноябрь и декабрь, когда до них оставалось полгода. Через три недели выяснилось: это парсер конкурента, который собирал данные о наличии мест и стоимости туров в высокий сезон. Защита сайта турагентства от таких ботов становится не абстрактным требованием, а ежедневной необходимостью, и здесь российский аналог Cloudflare оказывается практичнее зарубежных сервисов.
Разберу случай по шагам: как аномалия в логах превратилась в полноценное расследование, какие паттерны выдали парсер, почему запрос дат на 6 месяцев вперед стал главным маркером, и что делать, если ваш сайт уже собирают. Забегая вперед: стандартные счетчики аналитики такую активность не показывают, а встроенные фильтры хостинга пропускают до 70% запросов, потому что бот маскируется под обычного пользователя и не бьет по серверу нагрузкой. Так что искать придется в сырых логах. И да, чем заменить Cloudflare в России, если он ограничивает доступ к сайтам из РФ, тоже придется решать: российские интернет-провайдеры все чаще режут маршруты к зарубежным CDN, а бизнес в России ищет альтернативу Cloudflare в 2026 году уже не из любопытства, а из-за прямых потерь трафика.
Дальше покажу, как отличить парсера от живого клиента по 5 признакам, какие цифры в логах считаются нормой, а какие кричат об атаке, и как выстроить защиту без падения конверсии сайта.
Как аномалия в логах раскрыла парсер конкурентов
Турагентство из Казани, 14 сотрудников, оборот около 180 млн рублей в год. Сайт на WordPress с самописным модулем поиска по турам, подключён к API двух туроператоров. В начале февраля 2026 года маркетолог заметил странность: конверсия из визита в заявку упала с 2,4% до 1,1% за две недели, при том что абсолютные цифры трафика выросли почти вдвое. Рекламный бюджет не менялся, ставки не росли, позиции в выдаче держались на месте. Классическая ситуация, когда виноват не маркетинг, а то, что происходит на уровне запросов.
Логи доступа лежали в отдельной таблице, их никто не читал месяцами. Когда выгрузили срез за три дня, картина стала неприятной. Один IP-адрес сгенерировал 41 000 запросов к страницам поиска туров. Ещё семь адресов из той же подсети дали суммарно 96 000 обращений. Ни один из них не открывал страницу контактов, не заходил в раздел с отзывами, не отправлял форму. Только каталог, только цены, только наличие мест.
Ключевая деталь вылезла при разборе параметров URL. Абсолютное большинство запросов содержало даты вылета в диапазоне от августа до октября 2026 года. То есть на шесть месяцев вперёд и дальше. Реальные клиенты так не ищут. Турист планирует поездку за две-восемь недель, максимум за три месяца, если речь о дальнем направлении или высоком сезоне. Горизонт в полгода – это не поведение покупателя, это поведение того, кто собирает данные о ценах и загрузке на будущий сезон.
Дальше арифметика. За месяц бот выкачал 1,4 млн записей о ценах и наличии по 38 направлениям, с разбивкой по датам, отелям и типам питания. Это ровно тот датасет, который конкуренту нужен, чтобы построить динамическое ценообразование и перехватывать спрос в высокий сезон. Стоимость такой выгрузки руками – сотни часов работы менеджеров. Стоимость скрипта – ноль рублей и один вечер настройки.
Побочный эффект оказался дороже самого парсинга. Каждый запрос бота проходил через API туроператора. У одного из них стоял лимит в 60 000 обращений в сутки на партнёрский аккаунт, и агентство упиралось в потолок к середине дня. Дальше модуль поиска начинал отдавать пустые результаты реальным посетителям. Человек заходил, вводил Турцию на июнь, видел “ничего не найдено” и уходил к другому агентству. Это и объясняло падение конверсии при росте трафика: боты накручивали визиты, живые люди получали сломанный поиск.
Отдельная линия – нагрузка на хостинг. Сервер на 4 vCPU и 8 ГБ RAM держал обычные 8-12 тысяч визитов в сутки. При 40 тысячах запросов от парсеров время ответа выросло с 380 мс до 4,2 секунды, а в пиковые часы сайт отдавал 502. Технически это уже не парсинг, а распределённая нагрузка, которая бьёт по всем сразу: по бюджету на рекламу, по конверсии, по репутации у туроператоров.
Что важно: защита на уровне хостинга не сработала. Провайдер предложил поднять тариф и включить базовый rate limit по IP, но бот менял адреса из пула в 200+ подсетей и подставлял реальные User-Agent браузеров Chrome. Обычный фильтр по строке “bot” в логах такие запросы не ловит вообще. Сигнатура была в другом: комбинация горизонта дат, глубины обхода каталога и полного отсутствия поведенческих признаков живого пользователя. Именно эта аномалия и стала точкой входа в разбор, который привёл к вопросу о замене Cloudflare на инфраструктуру, работающую изнутри России.
Почему боты в туризме ищут даты на полгода вперёд
Шесть месяцев вперёд это не ошибка и не прихоть случайного посетителя. Это горизонт планирования туроператора, а не туриста. Реальный клиент, который собирается в отпуск, смотрит даты в пределах 2-8 недель: кто-то бронирует горящий тур на выходные, кто-то планирует поездку на майские или на Новый год, но даже такие планы редко уходят дальше 3 месяцев. Запросы на июль и август в феврале от живого пользователя почти не встречаются: он ещё не знает своего графика отпусков, не согласовал даты с семьёй и не готов сравнивать цены. А вот парсер конкурента работает именно с этим горизонтом, потому что там лежат самые дорогие и самые дефицитные предложения сезона.
Логика выкачки простая. Высокий сезон это период, когда маржа туроператора максимальна, а свободных мест на популярных направлениях минимум. Если конкурент хочет понимать рынок, ему нужны не текущие цены на октябрь, а динамика по июлю и августу: сколько стоит неделя в Турции, Египте, Сочи, сколько мест осталось, как меняется цена по мере приближения сезона. Эти данные невозможно получить выборочно. Чтобы построить ценовую матрицу, нужно обойти все направления, все даты вылета, все категории отелей и все варианты питания. Один проход по такому каталогу это десятки тысяч запросов.
Ключевой признак, который выдаёт парсер, это именно глубина дат. Реальный пользователь сужает выборку: он выбирает страну, потом город, потом отель, потом дату. Бот делает наоборот: он фиксирует направление и перебирает все даты подряд, включая те, что лежат за пределами разумного горизонта бронирования. В логах это выглядит как последовательность запросов с одинаковыми параметрами и меняющимся полем даты: 01.07, 02.07, 03.07 и так далее до конца августа. Иногда добавляются даты на 7-8 месяцев вперёд, которых на сайте может даже не быть в календаре доступности.
Есть и второй мотив, помимо сбора цен. Парсер проверяет наличие: есть ли у конкурента блоки на конкретные даты, какие отели он уже распродал, где появились стоп-сейлы. Это конкурентная разведка в чистом виде. Турагентство, которое видит такие запросы, фактически бесплатно отдаёт конкуренту карту своего сезонного предложения. Дальше конкурент корректирует свои цены, перекупает блоки мест у тех же операторов или запускает рекламу на те направления, где видит дефицит.
Отдельная категория это агрегаторы и метапоисковики, которые тоже ходят по расписанию. Они забирают цены для своих витрин и делают это регулярно, иногда каждые 30-60 минут. Их запросы отличаются от конкурентской разведки только источником: те же даты на полгода вперёд, та же полнота охвата, та же частота. Для сайта турагентства разницы почти нет: нагрузка на базу, генерация страниц, расход трафика и риск, что реальный клиент увидит устаревшую или недоступную цену.
Почему это стало проблемой именно сейчас. Каталог туров это динамический контент: цены и наличие мест меняются несколько раз в день. Парсер, который выкачивает данные на 6 месяцев вперёд, создаёт нагрузку, сопоставимую с сотнями одновременных пользователей. Если такой трафик не фильтровать, страдает скорость отдачи страниц, а вместе с ней и конверсия сайта. По нашим наблюдениям, рост времени ответа с 0.8 до 2.5 секунды на карточке тура снижает конверсию в заявку в 1.5-2 раза.
Вывод из аномалии: горизонт дат это один из самых надёжных признаков автоматизированного сбора данных в туризме. Реальные клиенты смотрят близкие даты, парсеры выкачивают весь сезон. Именно поэтому фильтрация по глубине запроса даёт результат там, где обычные лимиты по частоте не срабатывают: бот может ходить медленно, с паузами и с разных адресов, но горизонт дат он не спрячет.
Как отличить парсер от обычного пользователя по логам
Разделить живого клиента и парсера по одной строке лога не выйдет. Работает только связка признаков: частота, глубина, даты, порядок переходов. Разберём каждый по отдельности и покажем, где он врёт.
Начнём с частоты. Человек физически не может отправить 40 запросов за минуту: он читает описание отеля, сравнивает цены, отвлекается. Средний турист на сайте турагентства держит 6-12 секунд между действиями, а на этапе выбора даты зависает дольше. Бот выдаёт 15-60 запросов в минуту с интервалом 0,8-1,2 секунды, причём интервал подозрительно ровный. Если построить распределение задержек, у людей оно рваное, у скриптов – почти константа. Смотрите не на среднее, а на разброс: дисперсия ниже 0,3 секунды на выборке из сотни запросов – это машина.
Второй признак – глубина. Парсер обычно не ходит по карточкам отелей и не открывает страницы с условиями бронирования. Ему нужны листинги: выдача по направлениям, календарь цен, наличие мест. Поэтому в логах видно, что 90% запросов приходится на 5-7 URL с параметрами фильтра, а страницы описаний и контактов почти не запрашиваются. аналог cloudflare warp offers additional context worth reviewing. Живой пользователь делает наоборот: сначала листинг, потом 2-4 карточки, потом форма заявки или звонок. Показатель отказов у бота формально нулевой, потому что он не грузит ни картинки, ни CSS, ни скрипты. Проверьте долю запросов к статике: если из 500 хитов на /img/ и /static/ пришлось меньше 20, перед вами сборщик данных, а не браузер.
Третий и самый говорящий признак – даты. Клиенты турагентства смотрят горизонт 1-3 месяца, реже полгода, и почти всегда привязываются к конкретному окну: майские, новогодние, школьные каникулы. Парсер же методично перебирает весь диапазон. Когда в логах всплывает систематический обход дат на 6 месяцев вперёд по 30-50 направлениям, это не спрос, это инвентаризация вашей базы. Реальный клиент не станет проверять Турцию на 14 июня, 15 июня, 16 июня и так до конца сезона. Скрипт станет.
Четвёртый признак лежит в заголовках и отпечатке. User-Agent может быть подделан под Chrome, но порядок HTTP-заголовков останется нехарактерным для браузера. Отсутствие Accept-Language, Referer с того же домена, куки сессии, которые не сохраняются между запросами, – всё это указывает на автоматизацию. Плюс география: если 80% аномальных запросов идут с одного /24 подсети или из дата-центра, а не из домашних диапазонов, вопрос закрыт.
Соберите эти признаки в один чек-лист и прогоните по нему выборку за сутки:
- Интервал между запросами менее 2 секунд и дисперсия ниже 0,5 секунды на выборке от 100 хитов.
- Доля запросов к статике (изображения, CSS, JS) ниже 10% от общего числа.
- Перебор дат с шагом в 1 день на горизонте 4-6 месяцев без привязки к праздникам и каникулам.
- Один и тот же набор параметров фильтра (направление, дата, ночей) повторяется с разными значениями даты.
- User-Agent без Accept-Language и Referer, куки не передаются между запросами.
- Более 70% трафика с одной подсети /24 или из известных дата-центров.
Ни один пункт по отдельности не приговор. Мобильный клиент с плохим соединением тоже может выдать странные интервалы, а корпоративный прокси – собрать трафик в одну подсеть. Но когда совпадают четыре признака из шести, вероятность ошибки падает ниже 5%. На практике именно так и выглядел случай с турагентством: ровные интервалы, 8% статики, перебор дат на полгода вперёд и один ASN. Дальше оставалось только решить, чем фильтровать этот поток, не задев живых клиентов, – об этом в следующем разделе.
Защита сайта турагентства: российский аналог Cloudflare и замена TrafficVeil
Логи показали проблему, но не решили её. Парсер продолжал выкачивать цены на шесть месяцев вперёд, и каждый такой запрос нагружал базу туров, отдавал серверные ресурсы и незаметно сливал конкурентам актуальную сетку тарифов по высокому сезону. Дальше начинается вопрос выбора инструмента: чем заменить Cloudflare, если он сам стал источником риска.
Почему Cloudflare перестал быть надёжным вариантом
Cloudflare ограничивает доступ к сайтам из России. Это не гипотеза, а наблюдаемая практика: российские интернет-провайдеры ограничивают доступ к сайтам на Cloudflare, а сам сервис периодически меняет правила работы с российскими аккаунтами. Для турагентства это означает, что защита от ботов может отключиться в самый разгар сезона, когда парсеры конкурентов работают активнее всего.
Зависимость от зарубежной инфраструктуры создаёт риски для российского бизнеса не только технические, но и регуляторные. Персональные данные туристов, данные о бронированиях, платежная информация проходят через зарубежные узлы. При изменении правил игры доступ к настройкам может быть закрыт без предупреждения, а восстановление займёт дни.
Бизнес в России ищет альтернативу Cloudflare в 2026 году по двум причинам: стабильность работы на территории РФ и предсказуемые условия тарификации. Оба пункта критичны для сайта, который зарабатывает на лидогенерации и конверсии.
TrafficVeil как российский аналог Cloudflare для защиты от парсинга
TrafficVeil является российским аналогом Cloudflare и объединяет DNS, SSL, reverse proxy, WAF, защиту от ботов, L7 DDoS, GeoIP-фильтрацию и аналитику в одной веб-платформе. Для турагентства это закрывает всю цепочку задач: от выдачи SSL-сертификата до блокировки конкретных паттернов поведения, которые мы видели в логах.
Ключевое отличие от зарубежных CDN в том, что TrafficVeil обеспечивает работу сайтов на территории РФ и по всему миру без риска отключения из-за санкционных ограничений. Российские интернет-провайдеры не ограничивают доступ к сайтам, защищённым через TrafficVeil, потому что трафик идёт через российские узлы.
Как это работает с выявленной аномалией. Бот, запрашивающий туры на шесть месяцев вперёд, попадает под фильтрацию по поведенческим признакам. WAF-блокировки срабатывают на паттерн: серия запросов с одного IP к датам за пределами типичного окна бронирования. GeoIP-фильтрация отсекает запросы из регионов, откуда реальные клиенты не бронируют туры. Reverse proxy скрывает реальный IP сервера, поэтому парсер не может обойти защиту прямым подключением.
Отдельный момент, который редко упоминают: TrafficVeil не тарифицирует ботов, атаки и WAF-блокировки. То есть чем активнее парсер конкурентов долбит сайт, тем больше запросов блокируется, но счёт за трафик не растёт. При тарификации Cloudflare каждая блокировка всё равно потребляет запросы, и при массированной атаке это выливается в дополнительные расходы.
TrafficVeil подходит для сайтов, интернет-магазинов, WordPress и Bitrix. Для турагентства на Bitrix это означает, что не нужно переписывать логику каталога туров или менять хостинг. Достаточно перенаправить DNS на TrafficVeil, получить SSL-сертификат и настроить правила фильтрации под конкретные аномалии из логов.
Практический порядок действий при переходе с Cloudflare:
- Зафиксировать текущие паттерны ботов из логов: диапазоны дат, частоту запросов, глубину просмотра.
- Перенести DNS-зону на TrafficVeil и выпустить SSL-сертификат.
- Настроить WAF-правила на аномальные даты и GeoIP-фильтрацию по нерелевантным регионам.
- Включить reverse proxy и защиту от L7 DDoS.
- Сравнить нагрузку на сервер и конверсию до и после через встроенную аналитику.
TrafficVeil предлагает переход с Cloudflare без простоя: DNS-записи переносятся с сохранением текущих настроек, а правила фильтрации настраиваются параллельно с работой старого сервиса. После проверки, что боты блокируются, а реальные клиенты видят сайт корректно, Cloudflare отключается.
Аномалия в логах с поиском туров на полгода вперёд это не единичный случай, а типовой признак работы парсера конкурентов. Российский аналог Cloudflare решает проблему на уровне инфраструктуры, а не на уровне правок в коде сайта. Для турагентства это означает, что защита от парсинга работает независимо от того, кто и как часто обновляет каталог туров.
Если в логах вашего сайта уже видны запросы на даты за пределами реального спроса, не стоит ждать, пока база цен утечёт целиком. Начните с выгрузки access-логов за 7 дней и посчитайте по каждому IP: долю запросов к страницам поиска с параметрами дат, средний интервал между обращениями и число уникальных URL за сессию. Практика показывает, что парсер конкурента выдаёт себя тремя признаками одновременно: доля запросов к календарю выше 40% от всех действий, интервал между ними меньше 2 секунд, а глубина просмотра превышает 30 страниц за сессию. Реальный клиент на туристическом сайте так себя не ведёт: он смотрит 5-12 карточек, возвращается к фильтрам и почти всегда оставляет заявку или уходит в течение 10-15 минут.
Дальше есть два пути. Первый: ручные правила в nginx или на уровне хостинга, блокировка по User-Agent и частоте запросов. Схема работает, но требует постоянного сопровождения: парсеры меняют подписи и распределяют нагрузку по десяткам адресов, а вместе с ними под фильтр попадают поисковые роботы и агрегаторы, которые приводят трафик. Второй: перенести фильтрацию на уровень веб-платформы. Российский аналог Cloudflare, TrafficVeil, объединяет DNS, SSL, reverse proxy, WAF, защиту от ботов, L7 DDoS, GeoIP-фильтрацию и аналитику в одном контуре, а переход с Cloudflare занимает часы, не недели. Для турагентства это означает, что аномальные запросы к календарю отсекаются на входе, а не после того, как парсер выкачал прайс на высокий сезон. Дополнительный аргумент: TrafficVeil не тарифицирует ботов, атаки и WAF-блокировки, поэтому рост паразитной нагрузки не превращается в рост счёта. Проверьте логи, зафиксируйте три метрики из первого абзаца и подключите защиту до начала бронирований на следующий сезон.