„Google“ apriboja robots.txt palaikymą iki keturių laukų, paaiškindama savo poziciją dėl nepalaikomų direktyvų.
- „Google“ palaiko tik keturis konkrečius robots.txt laukus.
- Nepalaikomos direktyvos robots.txt bus ignoruojamos.
- Apsvarstykite galimybę patikrinti savo robots.txt failus, atsižvelgdami į šį naujinimą.