Cloudflare Precursor отслеживает все посещения, чтобы поймать ботов

      Впервые боты генерируют более половины всего веб-трафика. Cloudflare Precursor, новый инструмент компании, прекращает проверку идентификаторов на входе и начинает следить за тем, как ведут себя посетители, когда они внутри.

      Интернет только что преодолел странный рубеж. Боты теперь генерируют больше веб-запросов, чем люди. По подсчетам Cloudflare, автоматизированный трафик составляет примерно 57 процентов всего, что попадает в сеть.

      Этот сдвиг является фоном для продукта, который компания запустила в понедельник. Он называется Cloudflare Precursor и меняет способ, которым веб различает людей и машины.

      Наблюдение за всем визитом, а не только за дверью

      Традиционные средства защиты работают как охранник, проверяющий одно удостоверение на входе. CAPTCHA просит вас доказать, что вы человек, один раз, а затем пропускает вас. Современные боты достаточно хороши, чтобы подделать этот единственный момент.

      💜 технологий ЕС Последние новости из технологической сцены ЕС, история от нашего мудрого основателя Бориса и немного сомнительного ИИ-искусства. Это бесплатно, каждую неделю, в вашем почтовом ящике. Подпишитесь сейчас!Precursor использует другой подход. Он работает внутри браузера и наблюдает за всей сессией. Это означает движение мыши, ритм прокрутки, темп набора текста, использование буфера обмена и то, как долго страница остается видимой. Подделать один клик легко. Подделать целый визит человека — это настоящая инженерная задача.

      «Традиционные проверки безопасности смотрят на один момент времени, но современные боты стали достаточно умными, чтобы обмануть входные двери», — сказал Дейн Кнехт, технический директор Cloudflare. Промежуток между входом и оформлением заказа, по его словам, был черным ящиком. Precursor предназначен для его закрытия.

      Cloudflare утверждает, что инструмент ориентирован на конфиденциальность. Он фиксирует поведенческие паттерны, а не содержимое, записывая набор текста как ритм и темп, никогда не фиксируя фактические нажатия клавиш. Он включается одним кликом и не требует изменения кода.

      Сортировка машин по тому, что они хотят

      Precursor является одной из частей более крупного переосмысления. Другая касается хороших ботов.

      Не вся автоматизация враждебна. Cloudflare теперь сортирует трафик ИИ на три категории. Поисковые боты индексируют страницу, чтобы ответить на вопросы позже. Агентские боты действуют в реальном времени для человека. Обучающие боты поглощают ваш контент в модель.

      С 15 сентября новые сайты на Cloudflare будут по умолчанию блокировать обучающие и агентские боты на страницах с рекламой, пропуская поисковые. Логика заключается в деньгах. Поиск возвращает читателей; другие часто этого не делают. Это следующий этап борьбы, в которой Cloudflare уже сказал ИИ-краулерам платить издателям или быть заблокированными.

      Компания также добавляет способ для сайтов установить, как боты могут повторно использовать их контент: ничего не хранить, индексировать и ссылаться обратно или резюмировать и воспроизводить. Новая база данных под названием BotBase называет каждого известного краулера. Все это строится на предыдущем стремлении Cloudflare к стандарту против ботов с приоритетом конфиденциальности с крупными браузерами.

      Доверие, которое вы можете нести и потерять

      Самая сложная часть заключается в том, что бот у вашей двери часто не управляется компанией, которая его создала. Cloudflare хочет, чтобы операторы заявляли о себе, используя существующий веб-заголовок, чтобы сайт мог разрешить «OpenAI» и это решение сохранялось даже через слои посредников.

      Потеря этого доверенного статуса на более чем 20 процентах веб-доменов за Cloudflare, утверждает компания, является сдерживающим фактором с зубами. Это более мягкий аналог идей, таких как план Эстонии дать каждому ИИ-агенту номер удостоверения. Ставки возрастают, когда агенты начинают делать покупки и платить за нас. Это также перекликается с стремлением позволить издателям отказаться от ИИ, не исчезая из поиска.

      Инфраструктура тоже меняется

      Перепроектирование идет глубже, чем один поставщик. В тот же день Рабочая группа по инженерии Интернета опубликовала новый метод HTTP под названием QUERY, как сообщает Register. Он дает сложным запросам свой собственный глагол, безопасный и кэшируемый, вместо того чтобы заставлять их маскироваться под запросы, изменяющие данные.

      Инженеры Cloudflare и Akamai совместно написали стандарт. Это тема, проходящая через все это. Основная механика веба была построена для человеческих кликов. Теперь она тихо перестраивается для места, где большинство посетителей — машины.