admin 
AI robotai vis labiau veikia svetainės našumą, analizę, infrastruktūros išlaidas ir turinio matomumą. Nauji tyrimai ir infrastruktūros duomenys rodo, kad iššūkis nebėra tiesiog nuskaitymas, o valdymas, kaip automatizuotas srautas sąveikauja su svetainėmis ir nuo jų priklausančiomis įmonėmis.
Grandymas – mažiausia problemų
Daugelis diskusijų tarp SEO ir svetainių savininkų yra sutelktos į AI robotų pašalinimą. Pagrįstas susirūpinimas, kad dirbtinio intelekto sistemos renka turinį, skirtą LLM mokymui, praktiškai nepriskirdamos jokios reikšmės, kai turinys permaišomas į AI atsakymą.
- Svetainių savininkai nerimauja dėl intelektinės nuosavybės.
- Paieškos rinkodaros specialistai nerimauja dėl to, kaip AI sistemos naudoja jų turinį.
Tačiau infrastruktūros komandos vis dažniau mato skirtingas ir vienodai išplaukiančias problemas.
Banalybė, kad robotai pasimeta ir subraižo daiktus
Vis dažniau kyla problemų dėl to, kad daugelis robotų sukuria nereikalingą apkrovą, eikvoja išteklius ir kartais patenka į neefektyvias kilpas.
Remiantis ataskaita, vienas pasikartojantis modelis buvo susijęs su „Meta“ meta-išorinio agento tikrintuvu, kuris ištisas dienas sekdavo URL variantus, kol poveikio mažinimo sistemos užfiksavo.
Toks elgesys nėra piktybinis. Tai automatizavimas, veikiantis su bloga kodavimo praktika arba nepakankamais apsauginiais turėklais.
Deividas Belsonas iš „Cloudflare“ iliustravo prarastų robotų, eikančių išteklius, banalumą:
„Yra žmogus, kuris nežinojo, ką, po velnių, veikė vakar, bet šiandien užkodavo botą ir paleido jį. Jie net nesivargina patikrinti robots.txt.”
Šis stebėjimas užfiksuoja svarbią tikrovę. Šiandienos infrastruktūros problemos kyla dėl prastai suprojektuotos automatikos, veikiančios dideliu mastu.
Botai eikvoja išteklius nesukurdami vertės
Tokio elgesio pasekmė yra ta, kad svetainės išleidžia išteklius automatiniam srautui aptarnauti, o tai gali duoti mažai arba visai nenaudoti verslui.
Tai didelė el. prekybos svetainių problema. Skirtingai nei statinių puslapių užklausos, su krepšeliu susijusios užklausos paprastai apeina talpyklą ir reikalauja, kad serveris naudotų išteklius. Atsižvelgiant į svetainės architektūrą, šios užklausos gali suaktyvinti PHP vykdymą, duomenų bazės užklausas, seansų tvarkymą ir kitus daug išteklių reikalaujančius procesus.
Atsižvelgiant į tai, įbrėžimas yra mažiausia svetainės problema. Tikrinimo programa, kuri nuolat paleidžia brangią programų logiką ir eikvoja serverio išteklius, pablogina teisėtų lankytojų našumą.
Negalima ignoruoti ekonominio poveikio. Remiantis ataskaita, maždaug 80 % AI tikrinimo veiklos yra susijusi su modelio mokymu, užtemimo paieška arba naudotojo vykdomais tikrinimais.
Daugeliui įmonių kyla klausimas: ar šis srautas grąžina vertę, kad būtų pateisinami sunaudojami ištekliai?
Įmonės yra įstrigusios tarp matomumo ir išlaidų
Jei sprendimas būtų tiesiog robotų blokavimas, problema būtų išspręsta. Deja, daugelis išteklius eikančių automatizuotų sistemų taip pat yra susijusios su aptinkamumu ir matomumu.
Kai kurie robotai padeda paieškos sistemoms atrasti turinį. Kai kurie gali prisidėti prie AI citatų ir matomumo AI sugeneruotuose atsakymuose. Kiti gali tiesiog vartoti turinį ir išteklius, nesuteikdami tiesiogiai išmatuojamos verslo naudos.
Verslo prašoma padengti automatinio srauto išlaidas, kartu įvertinant, ar tas srautas pakankamai matomas, kad pagrįstų šias išlaidas.
Dabar kyla klausimas: už kuriuos robotus verta mokėti?
Ataskaitoje teigiama, kad svetainių savininkai turėtų užduoti šį klausimą:
Kokie robotai, kokiose mano svetainės dalyse ir kokiomis sąlygomis?
Botų valdymas turi įtakos matomumui, infrastruktūros išlaidoms ir svetainės našumui. Tikslas yra suderinti automatinį srautą su verslo tikslais.
Eismo numeriai jau gali būti paveikti
Automatizuotas srautas taip pat turi įtakos svetainės analizei. Remiantis ataskaita, AI botų srautas per pastaruosius metus išaugo 300%. Iki 2025 m. pabaigos maždaug vienas iš 31 apsilankymo TollBit tinkle įvyko dėl dirbtinio intelekto roboto.
Didėjant automatizuotam srautui, vien srauto apimtis tampa mažiau patikimu auditorijos augimo rodikliu.
Svetainėje gali būti rodomas didėjantis apsilankymų skaičius, tačiau atitinkamai nepadidėja klientų, prenumeratorių, konversijų ar pajamų. Kai kuriais atvejais papildomas srautas gali būti automatizuotas.
Ataskaitoje teigiama, kad reikšmingiausi signalai gaunami iš metrikos, susietos su faktiniais verslo rezultatais, įskaitant prekės ženklo paieškos paklausą, tiesioginį srautą, įtraukimo kokybę ir pajamas.
Kadangi automatizuotos sistemos sudaro didesnę viso srauto dalį, neapdoroti apsilankymų skaičiai tampa mažiau naudingi kaip atskiras sėkmės matas.
Sprendimai ir mažinimo taktika
Ataskaitoje pasisakoma už apgalvotą požiūrį į robotų valdymą.
Pirmasis žingsnis yra matomumas.
Prieš atlikdami pakeitimus, svetainių savininkai turėtų suprasti, ką iš tikrųjų daro automatinis srautas. Tikslas nėra identifikuoti kiekvieną atskirą robotą, bet nustatyti modelius, tokius kaip pasikartojantys užklausos, ciklai ir veikla, orientuota į dinaminius galutinius taškus.
Antras žingsnis – brangių svetainės funkcijų apsauga.
Krepšelio URL, atsiskaitymo keliai, vidiniai paieškos puslapiai, filtruotų produktų puslapiai ir daug parametrų turintys URL dažnai sunaudoja daug daugiau išteklių nei standartiniai turinio puslapiai. Apribojus nereikalingą tikrinimo programos prieigą prie šių sričių, galima sumažinti atliekų kiekį nepakenkiant svarbiam turiniui.
Ataskaitoje taip pat rekomenduojama atskirti paieškos robotus nuo AI tikrintuvų.
Ne kiekvienas robotas suteikia tą pačią vertę. Paieškos tikrintuvai tiesiogiai prisideda prie aptinkamumo ir nusipelno platesnės prieigos nei dirbtinio intelekto mokomieji tikrintuvai ar nežinomi grandikliai.
Vienintelė kiekvienai automatizuotai sistemai taikoma politika nebegali būti pateisinama, nes ekosistema tampa sudėtingesnė. Štai kodėl ataskaitoje pasisakoma už tikslinius pokyčius, o ne apie plačius apribojimus.
Tikslas nėra automatinio srauto panaikinimas. Tikslas yra valdyti jį taip, kad būtų palaikomi verslo tikslai ir sumažinamos nereikalingos išlaidos. Vienas iš būdų yra nuspręsti, kurie robotai gali pasiekti konkrečias svetainės dalis ir kokiomis aplinkybėmis.
Išsinešti
Botų srautas nebėra pagrindinė problema. Duomenys rodo, kad tai tapo infrastruktūros, matomumo, analizės ir verslo valdymo problema.
Didžiausias iššūkis yra tai, kad daugelis robotų eikvoja išteklius, suaktyvina brangias funkcijas, padidina srauto metriką ir sukuria išlaidas, kurias turi padengti svetainių savininkai.
Botų valdymas nėra skirtas blokuoti daugumą robotų. Kalbama apie robotų valdymą pagal tai, ką svetainė optimizuoja, atskirdama vertingą ir švaistomą automatizuotą srautą.
Perskaitykite „Kinsta“ duomenimis pagrįstą ataskaitą:
AI ir robotų eismo tikrovės patikrinimas
Teminis vaizdas, kurį sukūrė „Shutterstock“ / „DC Studio“.
