Темы

понедельник, 15 декабря 2025 г.

Googlebot доминирует в веб сканировании на фоне роста ИИ-ботов

Cloudflare опубликовала свой шестой ежегодный обзор года 15 декабря, проанализировав интернет-тенденции в своей глобальной сети из более чем 330 городов, которая обрабатывает более 81 миллиона HTTP-запросов в секунду. Отчет выявил фундаментальные изменения в том, как боты с искусственным интеллектом изменяют веб-трафик, угрозы безопасности и баланс между человеческой и автоматизированной активностью в интернете.

ИИ-боты изменяют ландшафт веб-трафика

Googlebot стал доминирующей силой в активности AI-краулеров, получив доступ к 11,6% уникальных веб-страниц в октябре и ноябре 2025 года — более чем в три раза превысив охват GPTBot от OpenAI (3,6%) и почти в 200 раз больше, чем PerplexityBot (0,06%). Bingbot занял третье место с 2,6%, за ним следуют Meta-ExternalAgent и ClaudeBot с 2,4% каждый.

AI-боты, исключая Googlebot, сгенерировали 4,2% HTML-запросов в течение 2025 года, в то время как один только Googlebot составил 4,5%. Трафик, генерируемый людьми, вырос до 47% HTML-запросов по состоянию на 2 декабря, впервые за несколько месяцев превысив трафик не-AI ботов на уровне 44%.

В отчете подчеркивается дилемма для веб-издателей: поскольку Googlebot осуществляет краулинг как для индексации в поиске, так и для обучения AI-моделей, блокировка его возможностей обучения AI означает риск потери видимости в поиске. По словам генерального директора Cloudflare Мэтью Принса, «Интернет не просто меняется, он фундаментально перестраивается. От AI до более креативных и изощренных акторов угроз — каждый день отличается от предыдущего».

Краулинг по действиям пользователей, когда боты посещают веб-сайты в ответ на вопросы, заданные AI-ассистентам, вырос более чем в 15 раз с января до начала декабря, во многом благодаря использованию ChatGPT в школах и на рабочих местах.

Организации гражданского общества сталкиваются с беспрецедентными атаками

Впервые организации гражданского общества — включая религиозные учреждения, некоммерческие организации, гражданские группы и библиотеки — стали наиболее атакуемым сектором киберпреступниками. На этот сектор пришлось 4,4% глобального смягчённого трафика по сравнению с менее чем 2% в начале года, при этом доля атак подскочила до более чем 17% в конце марта и достигла пика в 23,2% в начале июля.

Многие из этих организаций защищены проектом Galileo компании Cloudflare, который ранее сообщал о блокировке 108,9 миллиарда угроз, направленных на такие группы, в период с мая 2024 года по март 2025 года, что представляет собой увеличение на 241%.

Вехи безопасности и угрозы

Постквантовое шифрование теперь защищает 52% человеческого трафика к Cloudflare, что почти вдвое больше, чем 29% доли в начале 2025 года. Рост был обусловлен широким внедрением в экосистеме и обновлением iOS от Apple, которое включило гибридную квантово-безопасную защиту транспортного уровня по умолчанию.

Год также принес рекордные распределенные атаки типа «отказ в обслуживании», при этом Cloudflare заблокировал более 25 беспрецедентных DDoS-атак. Компания отразила атаку мощностью 11,5 терабит в секунду в сентябре, установив новый отраслевой рекорд.

Глобальные сдвиги в связности

Глобальный интернет-трафик вырос на 19% в годовом исчислении, при этом рост ускорился после середины августа. Трафик Starlink удвоился в 2025 году, поскольку спутниковый сервис был запущен более чем в 20 новых странах. SpaceX сообщила в ноябре, что у Starlink 8 миллионов активных клиентов, по сравнению с 4 миллионами в сентябре 2024 года.

Европейские страны доминировали в показателях качества интернета, при этом Испания возглавила список по общему качеству и средней скорости загрузки выше 300 Мбит/с. Почти половина из 174 крупных интернет-отключений, зафиксированных по всему миру, была вызвана отключениями по распоряжению правительств.


Комментариев нет:

Отправить комментарий

Избранные

Наночастицы с «троянским конём» из морских водорослей помогают снять фиброзный барьер опухолей и усилить иммунотерапию

Наночастицы с «троянским конём» из морских водорослей помогают снять фиброзный барьер опухолей и усилить иммунотерапию Наноч...

Часто просматриваемве