admin 
„Google“ tyliai atnaujino savo vartotojo sukeltų gaudytojų sąrašą su naujomis „Google NotebookLm“ dokumentacijomis. Šio iš pažiūros nedidelio pakeitimo svarba yra tai, kad akivaizdu, jog „Google NoteBookLM“ nepakenks robotams.txt.
„Google NotebookLm“
„NoteBookLM“ yra AI tyrimų ir rašymo įrankis, leidžiantis vartotojams pridėti tinklalapio URL, kuris apdoros turinį ir tada leis jiems užduoti įvairius klausimus ir sugeneruoti suvestines, remiantis turiniu.
„Google“ įrankis gali automatiškai sukurti interaktyvų minčių žemėlapį, kuriame organizuojamos temos iš svetainės ir ištraukiamos iš jos.
Vartotojo sukeltos gaudyklės ignoruoja robotus.txt
„Google“ vartotojo sukeltos gaudyklės yra žiniatinklio agentai, kuriuos sukelia vartotojai, ir pagal numatytuosius nustatymus nepaisykite robotų.txt protokolo.
Remiantis „Google“ vartotojo sukeltais „Fetchers“ dokumentais:
„Kadangi vartotojas paprašė pateikimo, šie gaudytojai paprastai ignoruoja robotus.txt taisyklės“.
„Google-noteBookLM“ ignoruoja robotus.txt
„Robots.txt“ tikslas yra suteikti leidėjams kontroliuoti robotus, kurie indeksuoja tinklalapius. Tačiau tokie agentai kaip „Google-notebookLM Fetcher“ ne indeksuoja žiniatinklio turinio, jie elgiasi vartotojų, kurie sąveikauja su svetainės turiniu per „Google NotebookLM“, vardu.
Kaip blokuoti nešiojamąjį knygą
„Google“ naudoja „Google-notebookLM“ Vartotojo agentas ištraukiant svetainės turinį. Taigi leidėjams, norintiems užkirsti kelią vartotojams, gali prieiti prie savo turinio, galima sukurti taisykles, kurios automatiškai blokuoja tą vartotojo agentą. Pvz., Paprastas sprendimas „WordPress“ leidėjams yra naudoti „WordFence“, kad sukurtumėte pasirinktinę taisyklę, kad blokuotumėte visus svetainių lankytojus, kurie naudojasi „Google-NoteBookLM“ vartotojo agentu.
Kitas būdas tai padaryti yra .htaccess, naudojant šią taisyklę:
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} Google-NotebookLM (NC)
RewriteRule .* - (F,L)
</IfModule>
