Az AI‑botok most már a hálózat új felhasználói kategóriáját alkotják és forgalomforrást jelentenek, a tiltások nem gátolják őket.

Mesterséges intelligencia már jelentős részét irányítja a webforgalomnak

Az Akamai legfrissebb jelentése szerint, amelyet a *Wired* magazinban publikáltak, az AI-alapú botok egyre nagyobb részt foglalnak el a weboldalak látogatottságában. A beszámoló leírja, hogyan alakul át az ilyen botoktól származó adatok blokkolása és azok kifinomult tevékenységei valódi „fegyverkezési verseny” formáját öltenek az interneten.

Mi történik
- Új látogatói típusok

A szakértők megjegyzik, hogy az AI-botok nem csupán másolják a tartalmat – új felhasználócsoportot alkotnak. Nagy portál tulajdonosai próbálnak korlátozniuk a hozzáférést azokhoz a anyagokhoz, amelyeket a botok gyűjthetnek és felhasználhatnak modelleik betanításához.

- Valós idejű adatgyűjtés

Néhány bot azonnal kinyitja a hálózati információkat, és használja azokat saját szolgáltatásainak javítására: aktuális árak termékekre, mozifilm-előadások időpontjai, rövid hírcikkek stb.

Növekedési statisztika
Periódus Részarány bot-látogatás 1–3 május 2025 1/200 látogatás IV. negyedév 2025 1/50 látogató
- robots.txt megsértése

Több mint 13 % a botok figyelmen kívül hagyja a *robots.txt* fájl irányelveit. II.-től IV. negyedévre ez a viselkedés 400 %-kal nőtt, míg az adminisztrátorok blokkolási kísérletei csak 336 % -kal emelkedtek.

- Rejtőzködés

Néhány bot megváltoztatja a fejléceket és általános böngészőkérelmeket imitál, hogy átugorja a védelmet.

Szolgáltatások és megoldások
Cég Mit kínál
TollBit Platform az AI-fejlesztők és kiadók közötti szerződések lebonyolítására, amely lehetővé teszi a tartalomért való fizetést.
Cloudflare Eszközök a rosszindulatú fejlesztők által készített botok blokkolásához.
Bright Data Azt állítják, hogy botjaik csak nyilvános információkat gyűjtenek.
ScrapingBee Kiemelik az internet nyitottságának elvét emberek és gépek számára.
Oxylabs Speciális adatgyűjtésben; azt állítják, hogy a weboldalak védelme nem különbözteti meg a jóindulatú és káros forgalmat.

Számos jogszerű célja van az anyaggyűjtésnek: kibervédelem, újságírói nyomozás és egyéb feladatok. Azonban a legtöbb védelmi mechanizmus még mindig minden forgatókönyvre ugyanúgy alkalmazható.

Piaci trendek
- Több mint 40 vállalat most kínál adatgyűjtő botokat az AI betanításához szükséges adatokra.

- Keresőmotorok AI-val és olyan ügynökök, mint az OpenClaw, aktiválódnak.

- Néhány cég már segít a vállalatoknak anyagokat találni az AI-ügynökök számára, és fejleszti a tartalomoptimalizációs eszközöket gépi tanuláshoz.

Ezek a fejlesztések előrevetítik a „teljeskörű marketingcsatorna” megjelenését, ahol keresés, hirdetés, média és kereskedelem egyetlen ökoszisztémába integrálódnak.