Cloudflare Precursor отслеживает целые визиты, чтобы поймать ботов

      Впервые боты генерируют более половины всего веб-трафика. Cloudflare Precursor, новый инструмент компании, перестает проверять удостоверения на входе и начинает следить за тем, как ведут себя посетители, когда они уже внутри.

      Интернет только что преодолел странный рубеж. Теперь боты генерируют больше веб-запросов, чем люди. По подсчетам Cloudflare, автоматизированный трафик составляет примерно 57 процентов от всего, что попадает в сеть.

      Этот сдвиг стал фоном для продукта, который компания запустила в понедельник. Он называется Cloudflare Precursor и изменяет способ, которым веб различает людей и машины.

      Наблюдая за всем визитом, а не только за входом

      Традиционные защиты работают как охранник, проверяющий одно удостоверение на входе. CAPTCHA просит вас доказать, что вы человек, один раз, а затем пропускает вас. Современные боты достаточно хороши, чтобы подделать этот единственный момент.

      💜 технологий ЕС Последние новости из технологической сферы ЕС, история от нашего мудрого основателя Бориса и немного сомнительного искусственного интеллекта. Это бесплатно, каждую неделю, в вашем почтовом ящике. Подпишитесь сейчас! Precursor выбирает другой подход. Он работает внутри браузера и наблюдает за всей сессией. Это означает движение мыши, ритм прокрутки, темп набора текста, использование буфера обмена и то, как долго страница остается видимой. Подделать один клик легко. Подделать целый визит человека — настоящая инженерная задача.

      «Традиционные проверки безопасности смотрят на один момент времени, но современные боты стали достаточно умными, чтобы обмануть их и пройти через переднюю дверь», — сказал Дейн Кнехт, технический директор Cloudflare. Промежуток между входом и оформлением заказа, по его словам, был черным ящиком. Precursor предназначен для его закрытия.

      Cloudflare утверждает, что инструмент ориентирован на конфиденциальность. Он фиксирует поведенческие паттерны, а не содержимое, записывая набор текста как ритм и темп, никогда не фиксируя фактические нажатия клавиш. Он включается одним кликом и не требует изменений в коде.

      Сортировка машин по тому, что они хотят

      Precursor является одной из частей более масштабного переосмысления. Другая касается хороших ботов.

      Не вся автоматизация является враждебной. Cloudflare теперь сортирует трафик ИИ на три категории. Поисковые боты индексируют страницу, чтобы позже ответить на вопросы. Агентские боты действуют в реальном времени для человека. Обучающие боты поглощают ваш контент в модель.

      С 15 сентября новые сайты на Cloudflare будут по умолчанию блокировать обучающие и агентские боты на страницах с рекламой, пропуская поисковые. Логика заключается в деньгах. Поиск возвращает читателей; другие часто этого не делают. Это следующий этап борьбы, в которой Cloudflare уже сказал ИИ-паукам платить издателям или быть заблокированными.

      Компания также добавляет способ для сайтов установить, как боты могут повторно использовать их контент: ничего не хранить, индексировать и ссылаться обратно или резюмировать и воспроизводить. Новая база данных под названием BotBase называет каждого известного краулера. Все это строится на предыдущем стремлении Cloudflare к стандарту анти-ботов с приоритетом конфиденциальности с крупными браузерами.

      Доверие, которое вы можете нести и потерять

      Самая сложная часть заключается в том, что бот у вашей двери часто не управляется компанией, которая его создала. Cloudflare хочет, чтобы операторы заявляли о себе, используя существующий веб-заголовок, чтобы сайт мог разрешить «OpenAI», и этот выбор сохранялся даже через слои посредников.

      Потеря этого доверенного статуса на более чем 20 процентах веб-доменов за Cloudflare, утверждает компания, является сдерживающим фактором с зубами. Это более мягкий аналог идей, таких как план Эстонии дать каждому ИИ-агенту номер удостоверения. Ставки возрастают, когда агенты начинают делать покупки и платить за нас. Это также перекликается с стремлением позволить издателям отказаться от ИИ, не исчезая из поиска.

      Инфраструктура тоже меняется

      Перепроектирование идет глубже, чем один поставщик. В тот же день Рабочая группа по инженерии Интернета опубликовала новый метод HTTP под названием QUERY, как сообщает Register. Он дает сложным запросам свой собственный глагол, безопасный и кэшируемый, вместо того чтобы заставлять их маскироваться под запросы, изменяющие данные.

      Инженеры Cloudflare и Akamai совместно написали стандарт. Это тема, проходящая через все это. Основная механика веба была создана для человеческих кликов. Теперь она тихо перестраивается для места, где большинство посетителей — машины.