Защита от парсинга
От: Протобайт
Модуль помогает защитить контент вашего вебсайта от автоматического парсинга ботами конкурентов. Например: статьи, описания и характеристики товаров и прочее.
Используется многоуровневая система защиты, которая выявляет и блокирует как простых, так и более продвинутых ботов, имитирующих поведение реальных пользователей.
Также модуль позволяет ограничивать или полностью блокировать доступ посетителей из определённых стран на основании их IP-адресов.
В ряде случаев модуль помогает существенно снизить нагрузку на сайт, т.к. блокирует многих паразитных ботов.
Лучше всего модуль подходит для защиты вебсайтов с тысячами страниц/товаров.
Функционал блокировки ботов и парсеров:
По активности (блокирует тех, кто слишком быстро и много просматривает страницы сайта)
По IP-адресу и диапазону подсети
По User-агенту (предусмотрен набор для самых популярных ботов)
По стране посетителя (геопозиция определяется по IP-адресу) Доступно с версии 1.12.0
Настройки исключений:
- Поисковых роботов через обратный DNS (для гарантии 100% доступности поисковых роботов). Нехорошие роботы притворяющиеся поисковыми - сразу блокируются. Доступно с версии 1.11.0
По сайту (мультисайтовость 1С-Битрикс)
По URL страниц
По группе пользователей
По IP-адресу и диапазону подсети
По User-агенту (не рекомендуется)
Присутствует удобный интерфейс для анализа заблокированных IP адресов, чтобы при необходимости можно было усложнить или упростить правила блокировки.
Демо-период не ограничен по функциональности.
Если на сайте используется композитный режим, то необходимо провести несложные манипуляции (смотрите инструкцию по установке).
|
Дата публикации
|
02.02.2023 |
|
Число установок
|
100 - 499 раз |
|
Дата обновления
|
29.05.2026 |
|
Включает в себя
|
Array |
|
Последняя версия
|
1.14.1 |
|
Адаптивность
|
Нет |
|
Поддержка композита
|
Да |
|
Совместимо с Сайты24
|
Нет |
|
Подходящие редакции 1С-Битрикс
|
3380 3381 3382 3383 |
|
Наличие демо-режима
|
Да |
|
Продолжительность демо-периода
|
10 |
- Добавлены и доработаны контекстные действия для IP в списках хитов, анализа хитов и заблокированных IP.
- Улучшение работы с композитом
- Добавлено хранение кода страны IP в хитах и блокировках. В административных списках хитов, блокировок и анализа появился вывод и фильтр по стране.
- - Добавили возможность блокировать пользователей по геолокации — на основе страны, определяемой по IP-адресу
- - Улучшение безопасности
- Улучшения интерфейса
- Значительное улучшение работы с ajax запросами
- Исправление ошибки Unknown field definition `BOT` (BOT) for \Protobyte\Antiparsing\Blocked Entity. (100)
- Улучшение интерфейса
- Улучшение проверки поисковых роботов через обратный DNS
- Оптимизация работы с композитом
Перед обновлением модуля обязательно сделайте резервную копию вашего сайта - Игнорирование ipv6
- Исправление работы белого списка IP-адресов
- Добавление поддержки диапазонов подсетей IP адресов (можно добавлять с маской в виде 47.235.0.0/16).
Доработки интерфейса. - Небольшие доработки интерфейса
- Доработка интерфейса.
Отображение причины блокировки «Подменный поисковый робот».
Отображение статуса проверки поискового робота через обратный DNS (работает для Яндекса, Google, Bing)
- Внедрение способа для определения поисковых роботов через запрос обратного DNS.
Это позволяет обеспечить 100% доступность к вашему сайту поисковых роботов от Яндекс, Гугл и Бинг. При этом другие боты, притворяющиеся поисковыми роботами, будут заблокированы
По-умолчанию опция отключена в настройках модуля - Изменение работы с композитом для поддержки новых версий ядра 1С-Битрикс
- Добавлен удобный интерфейс для анализа хитов
- Улучшение интерфейса (на странице хитов помечаем заблокированные хиты), повышение скорости работы
- Важное исправление для повышения точности работы модуля
- исправлена ошибка блокирования
исправление ошибки в интерфейсе настроек
исправлен текст страницы заглушки - fix ошибки при отсутствии модуля статистики