Защита от парсинга
От: Протобайт
Модуль помогает защитить контент вашего вебсайта от автоматического парсинга ботами конкурентов. Например: статьи, описания и характеристики товаров и прочее.
В ряде случаев модуль помогает существенно снизить нагрузку на сайт, т.к. блокирует многих паразитных ботов.
Лучше всего модуль подходит для защиты вебсайтов с тысячами страниц/товаров.
Функционал блокировки парсеров:
По активности (блокирует тех, кто слишком быстро и много просматривает страниц)
По IP-адресу и диапазону подсети
По User-агенту (предусмотрен набор для самых популярных ботов)
Настройки исключений:
- Поисковых роботов через обратный DNS (для гарантии 100% доступности поисковых роботов). Нехорошие роботы притворяющиеся поисковыми - сразу блокируются. Доступно с версии 1.11.0
По сайту (мультисайтовость 1С-Битрикс)
По URL страниц
По группе пользователей
По IP-адресу и диапазону подсети
По User-агенту (не рекомендуется)
Присутствует удобный интерфейс для анализа заблокированных IP адресов, чтобы при необходимости можно было усложнить или упростить правила блокировки.
Демо-период не ограничен по функциональности.
Если на сайте используется композитный режим, то необходимо провести несложные манипуляции (смотрите инструкцию по установке).
|
Дата публикации
|
02.02.2023 |
|
Число установок
|
100 - 499 раз |
|
Дата обновления
|
23.03.2026 |
|
Включает в себя
|
Array |
|
Последняя версия
|
1.11.10 |
|
Адаптивность
|
Нет |
|
Поддержка композита
|
Да |
|
Совместимо с Сайты24
|
Нет |
|
Подходящие редакции 1С-Битрикс
|
3380 3381 3382 3383 |
|
Наличие демо-режима
|
Да |
|
Продолжительность демо-периода
|
10 |
- Улучшения интерфейса
- Значительное улучшение работы с ajax запросами
- Исправление ошибки Unknown field definition `BOT` (BOT) for \Protobyte\Antiparsing\Blocked Entity. (100)
- Улучшение интерфейса
- Улучшение проверки поисковых роботов через обратный DNS
- Оптимизация работы с композитом
Перед обновлением модуля обязательно сделайте резервную копию вашего сайта - Игнорирование ipv6
- Исправление работы белого списка IP-адресов
- Добавление поддержки диапазонов подсетей IP адресов (можно добавлять с маской в виде 47.235.0.0/16).
Доработки интерфейса. - Небольшие доработки интерфейса
- Доработка интерфейса.
Отображение причины блокировки «Подменный поисковый робот».
Отображение статуса проверки поискового робота через обратный DNS (работает для Яндекса, Google, Bing)
- Внедрение способа для определения поисковых роботов через запрос обратного DNS.
Это позволяет обеспечить 100% доступность к вашему сайту поисковых роботов от Яндекс, Гугл и Бинг. При этом другие боты, притворяющиеся поисковыми роботами, будут заблокированы
По-умолчанию опция отключена в настройках модуля - Изменение работы с композитом для поддержки новых версий ядра 1С-Битрикс
- Добавлен удобный интерфейс для анализа хитов
- Улучшение интерфейса (на странице хитов помечаем заблокированные хиты), повышение скорости работы
- Важное исправление для повышения точности работы модуля
- исправлена ошибка блокирования
исправление ошибки в интерфейсе настроек
исправлен текст страницы заглушки - fix ошибки при отсутствии модуля статистики