Персональные агенты служат посредником между людьми и интернетом, превращая инструкции человека в запросы и действия на веб-сайтах. Клиент может попросить персонального агента сравнить товары на вашем сайте, найти статьи службы поддержки или совершить покупку. Для владельца сайта все три взаимодействия выглядят как автоматизированный трафик — и без четкого понимания того, какие именно агенты посещают сайт и что они делают, бывает сложно определить, приносит ли этот трафик пользу вашему бизнесу или создает риски. Полная блокировка агентов может казаться самым безопасным решением, но это означает потерю клиентов. Более глубокий анализ активности агентов позволяет самостоятельно решать, какой уровень доступа имеет смысл предоставить для вашего сайта.
Сегодня мы запускаем новую аналитику, которая поможет вам понять, как персональные агенты получают доступ к вашему сайту от имени пользователей, а также более детальные правила доступа для реализации этих решений на практике. Вместе они позволяют принимать агентов на ваших собственных условиях и способами, которые поддерживают ваш бизнес.
Посмотрите, как агенты получают доступ к вашему сайту
Понимание того, какой именно агент стоит за запросом, превращает необъяснимый автоматизированный трафик в трафик, с которым можно уверенно работать. Cloudflare поддерживает крупнейший в мире проверенный каталог ботов bot directory, и теперь мы интегрируем эти данные в ваши отчеты о трафике. В разделе «Аналитика безопасности» (Security Analytics) график «Анализ ботов» (Bot Analysis) теперь отображает «Персональных помощников» в качестве новой категории наряду с категориями «Проверенный бот», «Вероятно, человек», «Вероятно, автоматизированный» и «Автоматизированный». Команды безопасности могут выбрать ее, чтобы просматривать исключительно трафик персональных агентов с течением времени.
В разделе «Основные статистические данные» (Top statistics) новый виджет «Персональные помощники» (Personal Assistants) перечисляет агентов, посещающих ваш сайт, и количество запросов, отправленных каждым из них. Выберите одного агента с помощью фильтра, и все остальные виджеты обновятся, отображая данные исключительно по его трафику: запрашиваемые пути, получаемые коды состояния и сети, из которых он поступает. Вы можете сразу увидеть, выполняет ли агент вход в систему, читает ли страницы товаров, переходит ли к оформлению заказа или сталкивается с ошибками на страницах, которые он не может использовать.
Для сайтов, защищающих учетные записи пользователей с помощью функции «Защита от злоупотреблений учетными записями» (Account Abuse Protection, в настоящее время доступна в рамках предварительного тестирования), владельцы сайтов и команды по борьбе с мошенничеством могут видеть, какого именно пользователя представляет каждый агент. На странице обзора аудитории показано, какие персональные агенты активны среди ваших пользователей и сколько учетных записей их используют, что позволяет определить, является ли трафик агентов значимой частью вашего бизнеса. Каждое событие входа в систему и регистрации теперь показывает, был ли запрос сделан персональным агентом и каким именно. Команды по борьбе с мошенничеством могут фильтровать учетные записи по событиям ИИ-помощников или по их количеству.
Кроме того, в обзоре учетной записи каждого пользователя указаны агенты, действующие от имени этой учетной записи. Аналитик по борьбе с мошенничеством, расследующий подозрительный вход в систему, может определить, был ли он совершен агентом, которым клиент пользуется уже несколько недель, или агентом, который появился впервые только сегодня и требует более тщательной проверки. Если похоже, что злоумышленник использует агента для доступа к учетной записи, специалисты по борьбе с мошенничеством могут напрямую применить меры к этой учетной записи с помощью правила WAF для хэшированного идентификатора пользователя (Hashed User ID), не блокируя при этом агента для всех остальных пользователей, которые на него полагаются.
В совокупности эти представления дают вам более четкую основу для принятия решений о том, каких персональных агентов стоит принимать, ограничивать или блокировать.
Установите правила доступа в соответствии со своими предпочтениями
Этим летом мы представили правила для ИИ-ботов, чтобы владельцы сайтов могли настраивать раздельные параметры контроля доступа для ИИ-ботов, используемых для поиска, обучения и агентского поведения. Теперь мы расширяем существующие правила для агентов (Agents), добавляя возможности детального управления для поддерживаемых персональных агентов. Чтобы отразить этот более широкий охват, мы переименовываем настройку в «Правила доступа для поисковых роботов и агентов с искусственным интеллектом» (AI Crawler and Agent access policies).
В настройках безопасности (Security Settings) вы можете задать общие правила для агентов, а затем выбрать индивидуальную политику для каждого поддерживаемого персонального агента: «Разрешить» (не блокировать), «Блокировать на страницах с рекламой» или «Блокировать». Например, вы можете установить общие правила для агентов в положение «Блокировать на страницах с рекламой», а затем выбрать «Разрешить» (не блокировать) для конкретного поддерживаемого персонального агента, которого вы хотите принимать. Ваши существующие правила для поиска и обучения останутся без изменений.
Вы также можете сделать этот выбор при добавлении новой зоны в Cloudflare. В процессе настройки мы спросим вас, монетизируете ли вы страницы с помощью рекламы, а затем подберем рекомендуемые правила в соответствии с вашим ответом. Вы всегда сможете вернуться к настройкам контроля доступа позже в разделе «Настройки безопасности» (Security Settings).
Правильная политика зависит от особенностей вашего сайта. Один издатель может разрешить поддерживаемому персональному агенту доступ ко всему сайту, чтобы читатели могли находить его статьи, в то время как другой может заблокировать этого же агента на страницах, где контент поддерживается за счет рекламы. Оба издателя выбирают контроль доступа, который подходит именно для их бизнеса.
Идентичность агента — это лишь часть картины
Аналитика и правила, которые мы запускаем сегодня, предоставляют владельцам сайтов средства мониторинга активности персональных агентов и контроля их доступа. Наша следующая цель — помочь владельцам сайтов сохранять контекст своих отношений с пользователями, когда персональные агенты выступают в роли посредников. Сайт может распознавать агента, отправляющего запрос, но не иметь информации о пользователе, которой он в противном случае обладал бы: является ли он существующим клиентом, что именно он уполномочил агента делать, есть ли у него подписка или какие средства защиты должны применяться.
Достижение этой цели потребует учета принципов конфиденциальности для того, чтобы: (1) передавать контекст пользователя через агента, (2) помогать сайтам оценивать репутацию и (3) устанавливать четкую ответственность в случае возникновения сбоев. Мы будем делиться дополнительной информацией по мере сотрудничества с операторами агентов и другими участниками экосистемы, чтобы владельцы сайтов могли выбирать, предоставлять ли агентам расширенный доступ, продолжая при этом выстраивать отношения со своими пользователями.
Сделайте выбор для своего сайта
Тот самый человек, который просит персонального агента сравнить товары, найти поддержку или совершить покупку, по-прежнему остается клиентом, пытающимся связаться с вашим бизнесом. Ознакомьтесь с тем, как персональные агенты обращаются к вашему сайту, а затем перейдите в раздел Настройки безопасности → Правила доступа для поисковых роботов и агентов с искусственным интеллектом (Security Settings → AI Crawler and Agent access policies), чтобы установить условия, которые подходят вашему сайту.
