Ботове четат мрежата вместо хората: AI трафикът към сайтовете скача с над 60% за година

Все по-голяма част от посещенията на всеки сайт вече не идват от хора, а от алгоритми, които събират съдържание за AI модели. Ново изследване на британската технологична компания 51Degrees показва, че трафикът от AI ботове расте с 62,5% на годишна база — от 8% на 13% от всички уеб сесии за периода до май 2026 г. Данните обхващат анализ на над 3 милиарда посещения в сайтове от секторите телекомуникации, реклама, медии, ритейл, финансови услуги и технологии.

Начело на класацията стои AmazonBot — ботът, който Amazon използва за индексиране на съдържание и захранване на Alexa, Rufus и продуктовото търсене. Той генерира 4,1% от целия уеб трафик. Следват Meta-ExternalAgent с 2,9%, Microsoft BingBot с 1,35%, Anthropic с 0,19%, OpenAI с 0,09%, Perplexity с 0,04% и Google Gemini с едва 0,0003%. Собственият crawler на Google за търсене също събира данни за AI резултати, но компанията не включва тези числа в статистиката, защото не може да отдели трафика за класическо търсене от този за AI отговори.

По логиката на 51Degrees по-ниските проценти невинаги означават по-малка активност — по-скоро сочат по-зряла технология, която вече е изтеглила основната част от съдържанието, от което се нуждае. AmazonBot и Meta-ExternalAgent заедно формират над 60% от целия AI бот трафик, което ги прави и най-агресивните "консуматори" на съдържание в момента. Самата 51Degrees уточнява, че методологията не улавя ботове, които се маскират като реални потребители — което означава, че истинският дял на AI трафика вероятно е по-висок от отчетените 13%.

За издателите сметката е двойна. От една страна плащат за честотната лента, изразходвана при самото извличане на данни. От друга — губят реферален трафик, защото AI отговорите заменят кликването към оригиналния източник. Nina Gould, директор по иновациите във Forbes, описва опитите да се спре тази практика като безкрайна и безрезултатна борба — спреш ли един бот, на негово място се появяват десет нови. А James Rosewell, изпълнителен директор на 51Degrees, определя ситуацията като структурен проблем за по-малките и независими издатели, които трудно понасят едновременно кражбата на съдържание и ръста на разходите за инфраструктура.

Мащабът на явлението вече не е нишов. По данни на Cloudflare, споделени от изпълнителния директор Matthew Prince, автоматизираният трафик изпревари човешкия за първи път в историята на интернет — ботовете формират около 57,5% от целия HTML трафик в мрежата. Ефектът се усеща и във финансовите резултати: според изследване на Association of Online Publishers и Deloitte, дигиталните приходи на издателите във Великобритания се понижават с над 4,5% на годишна база през първото тримесечие на 2026 г. — спад, определен от организацията като "първите трусове на земетресение", предизвикано именно от намаляващия реферален трафик.

Отговорът идва бавно. Google и Cloudflare разработват технологии като Private Access Tokens, които да отличават реални потребители от автоматизирани скриптове и AI агенти, а компании като 51Degrees вече предлагат продукти, таксуващи ботовете за нежелано извличане на данни. Проблемът е, че повечето издателски сайтове изобщо не разпознават новите AI агенти в своите robots.txt файлове — правилата са писани преди половината от тези ботове да съществуват.

Промяната засяга цялата икономика на дигиталното съдържание, не само големите пазари. Всеки сайт, който разчита на органично търсене като канал за достигане до аудитория, вече губи част от стойността на собственото си съдържание в момента, в който то бъде индексирано, преразказано и поднесено обратно от чужд AI отговор — без клик, без реклама, без атрибуция. Моделите за компенсация, които Cloudflare и 51Degrees изграждат в момента, засега работят само за издатели с достатъчен мащаб да преговарят условия. За по-малките играчи остава единствено дефанзивна стратегия: точен контрол върху robots.txt, редовен преглед на server log файловете и готовност съдържанието да се позиционира не само за търсачки, а и за AI агенти, които вече го четат вместо реалните читатели.